Новости

Источник изображения: Visual China

Соавтор | Чжоу Цзыхао

Редактор Ван Вэйкай

Примечание редактора:

сOpenAI Ящик Пандоры генеративного искусственного интеллекта открыт. Большие модели по-прежнему будут самой горячей тенденцией в 2024 году. Силиконовая долина, родина технологий, полна талантов. Любая превосходная организация должна была найти метод и соответствующие инструменты, чтобы максимально стимулировать творческие способности каждого человека. Но что еще более важно, запечатлейте эти мимолетные моменты гениальности. «AI Lightyear» фиксирует текущие изменения в крупных модельных компаниях в стране и за рубежом, интервьюируя сотрудников некоторых компаний, занимающихся искусственным интеллектом: где таланты, которые будут управлять будущим? Это для второй статьи.

Проехав почти 40 миль от Саннивейла до центра Сан-Франциско, Чжао Мин, студент магистратуры Стэнфордского университета, примет участие в мероприятии, посвященном венчурному капиталу в области искусственного интеллекта. Это трек активности Чжао Мина вечером выходного дня в июне.

Мероприятие провели партнеры местного долларового фонда в Кремниевой долине. Среди участников — основатели десятков AI-стартапов и около 50 инвесторов, представляющих разные капиталы. Во время мероприятия предприниматели вышли на сцену, чтобы продать свои идеи инвесторам, а инженеры искусственного интеллекта наблюдали за «рынком» в зале.

«Такая сцена происходит каждую неделю в Кремниевой долине», — рассказал Чжао Мин автору «AI Lightyear». С помощью друга он достал билет. Чжао Мин специализировался в области компьютерных наук в Стэнфордском университете и теперь полон решимости войти в индустрию искусственного интеллекта.

Он надеется на возможность познакомиться с другими специалистами-практиками на этом мероприятии, чтобы получить самую свежую информацию в отрасли. Однако его удивило то, что половина из более чем 400 участников были китайцами.

По мере их разговора личности этих людей постепенно стали ясны: были венчурные капиталисты, прилетевшие из Пекина в поисках инвестиционных возможностей, были также китайские инженеры-программисты, которые много лет работали в Google, Microsoft и т. д.; некоторые китайцы, изучавшие искусственный интеллект в лучших университетах США.

Они являются воплощением китайцев в Кремниевой долине. Отчет (2022 г.) американского аналитического центра McCropolo показывает, что среди ведущих исследователей искусственного интеллекта, работавших в то время в США, исследователи из Китая составляли 38%, а американцы — 37%. В 2019 году эти две цифры по-прежнему составляли 27% и 31%.

Китайцы всегда были «костяком» технологического круга Кремниевой долины. Теперь, в условиях новой волны искусственного интеллекта, какие взлеты и падения переживает китайская молодежь в Кремниевой долине?

«Отправляйтесь в Силиконовую долину, отправляйтесь туда, где ближе всего к новым производительным силам».

«Многие специалисты по искусственному интеллекту в Кремниевой долине — китайцы», — рассказал автору Цинь Тянь.

Он инженер машинного обучения (MLE) в известной технологической компании в Кремниевой долине. Окончив в 2019 году университет ТОП-30 в США со степенью магистра компьютерных наук, он начал заниматься исследованиями алгоритмов, связанных с искусственным интеллектом, в Кремниевой долине. В его команде почти 40% составляют китайские инженеры. «Остальные в основном из Индии, а некоторые — восточноевропейцы из Румынии и других стран».

Согласно отчету Silicon Valley Indicators, население Кремниевой долины в основном состоит из азиатов и белых, а среди азиатского населения наибольшая доля приходится на китайцев. В 2022 году китайцы составляли 31% населения Азии, став одной из самых важных азиатских групп в Кремниевой долине. До этого многие китайские друзья Цинь Тяня были инженерами-программистами.

Но в начале 2022 г.OpenAIПосле выхода последних версий GPT3 и DALL-E 2 эта ситуация была сломана, и многие люди начали переходить на ИИ.

Возьмем, к примеру, Цинь Тяня. Ранее его бизнес-направление все еще занималось разработкой приложения для мобильных камер с функциями искусственного интеллекта. К июню 2022 года компания внезапно объявила о стратегической корректировке, сократив свою почти пятилетнюю линейку продуктов и переключившись на область крупных моделей.

На самом деле, подобные корректировки не являются редкостью в 2022 году. В том году многие технологические гиганты Кремниевой долины, такие как Meta, Adobe и Google, внесли серьезные коррективы в бизнес и разработали область больших моделей искусственного интеллекта, следуя по стопам OpenAI. Это изменение также побудило большое количество инженеров-программистов перебраться в бизнес-сектор искусственного интеллекта, многие из которых являются китайцами.

Чжан Юй, окончивший Университет Карнеги-Меллон, в настоящее время работает в материнской компании Google.АвтопилоткомпанияУэймо Работа, отвечающая за исследования и разработку автомобильных систем искусственного интеллекта. Чжан Юй представил:ЧатGPT-4 После своего появления Waymo пережила волну отставок, и некоторые китайские коллеги тоже предпочли уйти. «Теперь текучесть кадров варьируется, и некоторые группы могут терять по одному человеку в неделю», — сказал Чжан Юй.

Большинство этих коллег перешли в технологические компании, занимающиеся исследованием и разработкой больших языковых моделей, или вернулись в Google, чтобы отвечать за исследования в области ИИ и разработку других продуктов. Чжан Юй посетовал: «В Кремниевой долинеГПТ Это стало более популярной областью, чем автономное вождение. "

К этой волне искусственного интеллекта присоединяются не только «старые инженеры», много лет усердно работавшие в Кремниевой долине, но и «новички», приехавшие из Китая, чтобы догнать эту тенденцию.

Ши Ци, 25 лет, один из них. В мае этого года он прилетел в Сан-Франциско из Китая и решил присоединиться к стартапу, специализирующемуся на искусственном интеллекте. Ши Ци не уверен, сколько таких людей, как он, приехало сюда из Китая в этом году, но он уверен: «Таланты и капитал всегда будут перетекать в места с наиболее высокой производительностью».

Решение Шици приехать в Силиконовую долину не было импульсивным. До этого он был инженером-программистом. После окончания колледжа в 2021 году работал в крупной отечественной интернет-компании. Поначалу Ши Ци, который был новичком в этой работе, хотел как можно шире «гибко проявить свои таланты» в деловой сфере. Но позже он все больше и больше чувствовал, что реальная работа отклоняется от его ожиданий.

Примерно в 2022 году линейка продуктов Ши Ци перешла в застойный рост: независимо от того, насколько сильно была оптимизирована работа с продуктом, количество пользователей больше не будет наблюдать прорывного роста. «Похоже, что эра акций действительно наступила». Ши Ци чувствует, что рано вошел в «пенсионное состояние». Он поддерживает систему каждый день и вносит некоторые изменения в код в соответствии с потребностями, и все.

Дни работы с 10 до 6 и уход с работы вовремя, уже не 996, заставили Ши Ци почувствовать угрозу. Хотя я «свободен», это также означает, что «с тобой или без тебя все равно».

Эта ситуация натолкнула его на мысль о подработке. По счастливой случайности Ши Ци прошел собеседование в стартапе по искусственному интеллекту в Мичигане, США, и начал работать в нем удаленно. Весной 2022 года руководитель компании внезапно отправил Ши Ци сообщение, в котором сообщил, что компания получила новую модель, последнюю версию InstructGPT, выпущенную OpenAI, и пригласил его присоединиться к внутреннему тестированию.

«Это полностью отличается от ИИ, который я видел раньше», — вздохнул Ши Ци. Хотя GPT-3 вышел еще в 2020 году, InstructGPT использует обучение с подкреплением на основе обратной связи человека (RLHF) для генерации ответов, которые больше соответствуют человеческим предпочтениям и намерениям. У Ши Ци была интуиция: «Это может принести что-то другое».

С тех пор компания Ши Ци начала широко использовать эту языковую модель для разработки новых продуктов. Это также заставило Ши Ци почувствовать разрыв в продвижении ИИ между Китаем и Соединенными Штатами: в то время лишь немногие инженеры-программисты вокруг Ши Ци были знакомы с GPT, и никто в офисе не говорил о бумаге-трансформере. Но в США OpenAI стала горячей темой среди крупных технологических компаний.

Ши Ци напомнил, что первая группа инженеров в Китае, которые обратили внимание на GPT, любила посещать GitHub (сообщество открытого исходного кода). В то время некоторые инженеры с материка начали получать доступ к API GPT и создавать некоторые оболочки-приложения. Но только после выхода GPT-3.5 в конце 2022 года крупные отечественные модели стали востребованы капиталом. В 2023 году СМИ также называют ее вступившей в «Битву 100 моделей».

В конце 2023 года Ши Ци решил уйти в отставку. Имея предыдущий опыт удаленной работы, он получил приглашение от своей нынешней компании. «Отправляйтесь в Силиконовую долину, отправляйтесь туда, где ближе всего к новой продуктивности», — сказал он.

Модель крупной компании, начинающая компания борется за сторону B

С тех пор, как компания сделала ставку на искусственный интеллект, Цинь Тянь почувствовал, что нагрузка на работе возросла.

До лета 2022 года рабочая атмосфера была относительно спокойной. По мнению Цинь Тяня, «это связано с барьерами конкуренции, оставшимися с предыдущего информационного века». Он отвечает за внутреннюю разработку и каждый день уходит с работы в одно и то же время. Выпуск новых продуктов не требует особого давления «Старые интернет-продукты приносят доход, и выпуск новых продуктов происходит через 2–3 года — это нормально. годы."

Сегодня крупные технологические компании Кремниевой долины не осмеливаются расслабляться в конкурентной борьбе в области искусственного интеллекта. Корректировка деловой линии сделала повседневную жизнь Цинь Тяня более компактной. Выход с работы в 23:00 стал нормой, а сверхурочная работа по выходным стала неизбежной.

Прогресс OpenAI в AIGC был слишком быстрым, что оказало большое давление на другие компании в Кремниевой долине. В феврале 2024 года, после того как OpenAI выпустила Sora, цена акций компании Цинь Тяня сильно упала. Всего за одну весну цена упала более чем на 30%. В прошлом году рынок капитала все еще был полон уверенности в стратегической корректировке компании. В течение некоторого времени цена акций даже выросла более чем на 60%.

Столкнувшись с конкуренцией со стороны крупных производителей, таких как OpenAI, компания Цинь Тяня ускорила темпы обновления продуктов и сократила цикл выпуска как минимум до одного раза в шесть месяцев, чтобы гарантировать, что компания остается конкурентоспособной в этой волне технологических инноваций и избегает фотографирования на пляж. .

«Продукты должны разрабатываться ускоренными темпами, и в то же время необходимо исследовать больше передовых работ», — сказал Цинь Тянь, что в Кремниевой долине происходит гонка вооружений в области новых технологий. Цинь Тянь в основном отвечает за разработку мультимодальных больших моделей (MLLM). Проще говоря, это позволяет модели одновременно принимать ввод языковых, видео, аудио и других данных, чтобы лучше понимать и генерировать контент. всесторонне.

Область мультимодальности — это новая шахта, ожидающая изучения инженерами ИИ. В отраслевом документе, опубликованном в мае, показано, что сокращение потребления ресурсов при одновременном расширении их применимости и минимизации снижения производительности являются сегодня основными целями исследований и разработок MLLM.

Недавно MLVU, многозадачный тест для оценки понимания длинных видео, предложенный China Wisdom и многими отечественными университетами, оценил 20 последних популярных мультимодальных больших моделей и обнаружил, что уровень точности однократного выбора у GPT-4, занявшего первое место, было недостаточно на 65%, существующие модели по-прежнему сталкиваются с огромными проблемами в понимании длинного видео.

«Нам необходимо постоянно обращать внимание на появление новых технологий для работы в этой новой области», — сказал Цинь Тянь. Например, когда архитектура алгоритма DIT (Diffusion Transformer), используемая Open AI, генерирует более качественные видео, Цинь Тянь и его коллеги немедленно отслеживают это, чтобы определить направление итерации продукта.

Крупные компании быстро продвигаются по пути больших моделей, а густонаселенные стартапы Кремниевой долины также создают свои собственные лагеря искусственного интеллекта.

По наблюдению Ши Ци, многие стартапы Кремниевой долины разрабатывают линейки продуктов B-конца, что может быть связано с прошлым опытом руководителей этих компаний в крупных компаниях. «Они могут использовать связи, накопленные на работе, чтобы быстрее открыть деловые каналы», — сказал Ши Ци.

Сегодня Ши Ци и его команда разрабатывают комплексный инструмент разработки для предприятий, позволяющий повысить эффективность работы программистов с помощью искусственного интеллекта. В сентябре прошлого года Microsoft также запустила аналогичный «второй пилот» приложения. Они надеются реализовать сценарий, в котором разработчики смогут просить этих помощников по программированию при написании кода выполнять свою работу более эффективно.

«Повышение эффективности технологий является конкурентным направлением многих начинающих компаний в Соединенных Штатах», — сказал Ши Ци, а комплексное решение означает создание автоматизированного рабочего процесса. Весь процесс полностью реализуется искусственным интеллектом, и клиентам нужно только обращать внимание на то, соответствуют ли конечные результаты ожиданиям. «Если мы хотим обгонять в поворотах, мы должны больше думать о дифференцированной конкуренции с этими крупными компаниями», — сказал Ши Ци.

Но с некоторыми техническими проблемами все еще сталкиваются инженеры Кремниевой долины. По мнению Шици, повышение точности продукции — это техническая проблема, которую им срочно необходимо решить. Для разных пользовательских сценариев используются разные стандарты точности.

Для продуктов C-end, ориентированных на эмоциональное общение с пользователем, точности 70 % может быть достаточно. Но для потребностей уровня предприятия цель, которую они преследуют, — это 80%. Это также заставляет их искать более точные данные базы знаний для обучения моделей.

Чтобы конкурировать, сжигание денег неизбежно. Для компании Ши Ци каждый раз, когда она обслуживает компанию, даже если это небольшой проект, ежемесячная стоимость вывода составляет тысячи долларов. «Такая стоимость одного проекта в развивающейся стране эквивалентна ежемесячной зарплате инженера-алгоритма, работающего полный рабочий день».

Столкнувшись с высокими затратами, Ши Ци откровенно заявил, что компания еще не достигла прибыльности, но недавно ряд крупных компаний подписали с ними контракты на обслуживание и рассчитывают достичь прибыльности через год. «По крайней мере, оплата — это положительный знак», — сказал Ши Ци.

Увольнения, предпринимательство и возвращение в Китай: тройка Кремниевой долины

Согласно статистике Silicon Valley Index, с 2019 по 2023 год в Кремниевой долине и районе Сан-Франциско родилось около 3000 стартапов, что достигло рекордного уровня. Среди них можно увидеть имена многих китайских руководителей. В настоящее время к числу «единорогов» присоединились четыре основанные в Китае компании в области искусственного интеллекта — Scale AI, Cognition AI, Imbue и Cresta, чья общая стоимость превышает 18 миллиардов долларов.

В Кремниевой долине никогда не было недостатка в мифах о предпринимательском богатстве, но в условиях жесткой конкуренции предпринимательство также означает риски. В кругу друзей Цинь Тяня все еще есть небольшое количество китайских инженеров, которые покинули крупные заводы, чтобы начать собственный бизнес, и все больше людей все еще предпочитают подождать и посмотреть.

В то же время в Кремниевой долине за последние два года наблюдалась продолжительная волна увольнений, хотя искусственный интеллект вызвал новую волну энтузиазма на рынках капитала.

Ария, работающая в Кремниевой долине, рассказала автору книги «Световые годы искусственного интеллекта», что эта волна увольнений затронула многих китайских коллег вокруг нее. По ее словам, уволенные инженеры в основном занимаются написанием или отладкой базового кода и другими отладочными работами. Очевидно, что эту работу легко заменить ИИ.

По оценкам сервиса отслеживания занятости Layoffs.fyi, с начала 2022 года было сокращено более 400 000 рабочих мест в сфере технологий. По другим данным, в период с 2022 по 2023 год общее количество увольнений в технологических компаниях США превысит 500 000 человек. Это крупнейшая серия увольнений в технологической отрасли со времен финансового кризиса 2008 года.

Цинь Тянь также ясно чувствует, что в 2024 году в Силиконовой долине будет гораздо меньше возможностей трудоустройства, чем в 2019 году.

В конце прошлого года уровень инфляции в США когда-то был ниже 3% в годовом исчислении, что почти вдвое меньше, чем 6% в начале 2023 года. CGC, компания по анализу занятости в Кремниевой долине, объяснила, что после падения уровня инфляции у технологических компаний не будет возможности повышать цены и они не смогут улучшить производительность за счет повышения цен. Увольнения станут наиболее прямым способом контроля над расходами.

«Китайский инженер, которого уволили из Google, однажды пришел в нашу компанию на собеседование», — рассказал Ши Ци автору «AI Lightyear», но в конце концов компания его не наняла. По словам Цинь Тяня, в Кремниевой долине средняя годовая зарплата инженера-исследователя алгоритмов ИИ, проработавшего около трёх лет, составляет около 450 000 долларов США, что является немалыми расходами для многих начинающих компаний.

«Волна увольнений отпугнула многих китайцев, мечтающих о предпринимательстве, от активных действий», — сказал Цинь Тянь.

С другой стороны, строгие визовые правила также лишают их «свободы выбора». Согласно иммиграционным правилам США, прежде чем получить грин-карту, безработные, имеющие визу для стажировки OPT или рабочую визу H-1B, должны найти новую работу в течение 60 или 90 дней, в противном случае они столкнутся с риском депортации обратно на родину. страна.

Если предприятие потерпит неудачу, безработица может помешать им остаться в Кремниевой долине. Ария считает, что сейчас не самое подходящее время для начала бизнеса в сфере ИИ. Подобно ситуации, с которой столкнулись многие китайские компании в области ИИ, в Кремниевой долине «достижение хорошей коммерциализации продуктов ИИ все еще остается проблемой».

За океаном, в Китае, энтузиазм в отношении ИИ, кажется, только что достиг своего апогея. Не так давно в Шанхае завершилась Всемирная конференция по искусственному интеллекту. Находясь в чужой стране и ограниченный своей рабочей энергией, Цинь Тянь уделяет меньше внимания новым разработкам в развитии отечественной индустрии искусственного интеллекта, но считает, что отечественные ученые уже очень продвинулись в исследованиях алгоритмов искусственного интеллекта.

В мировом рейтинге моделей с открытым исходным кодом, опубликованном Hugging Face, крупнейшим в мире сообществом крупных моделей с открытым исходным кодом, ряд моделей с открытым исходным кодом из Китая когда-то занимали первое место.

Однако Цинь Тянь не планирует возвращаться в Китай для разработки в краткосрочной перспективе. Он считает, что вычислительная мощность имеет решающее значение для обучения больших моделей, а нехватка передовых вычислительных мощностей всегда была проблемой, с которой приходилось сталкиваться китайским компаниям, занимающимся искусственным интеллектом. решать.

В августе 2022 года Nvidia получила уведомление из США с требованием прекратить экспорт чипов A100 и H100 в Китай.

17 июля этого года агентство Bloomberg сообщило, что администрация Байдена рассматривает возможность введения ужесточенных правил, которые позволят контролировать иностранную продукцию с использованием любой технологии американского производства. Он будет нацелен на китайскую деятельность таких компаний, как японская Tokyo Electron и ASML, которые делают оборудование для производства микросхем решающим фактором в отрасли.

Геополитические факторы заставили многих технических талантов в области искусственного интеллекта в Кремниевой долине усомниться в своем трудоустройстве после возвращения в Китай.

«Даже если конкуренция за работу высока, вы не можете отказаться от поездки в Силиконовую долину». Чжао Мин, студент магистратуры Стэнфордского университета, посетовал автору, что многие студенты магистратуры по искусственному интеллекту в Соединенных Штатах предпочитают учиться в Соединенных Штатах. как их первый выбор. По этой причине многие студенты будут следить за последними мероприятиями по обмену в отрасли на таких платформах, как «luma». По его мнению, поиск работы через социальные сети — самый реальный путь в Кремниевой долине на данный момент.

В мае этого года на Форуме Ябули Дин Цзянь, управляющий директор и партнер Jinshajiang Venture Capital, заявил, что в прошлом более 70% аспирантов Кремниевой долины, занимающихся искусственным интеллектом, могли вернуться в Китай, но сейчас их почти нет.

«Даже если вы не можете гарантировать грин-карту, иметь опыт работы в Кремниевой долине определенно неплохо», — сказал Чжао Мин.

(Чжао Мин, Цинь Тянь, Чжан Юй Шици — все это псевдонимы)