notícias

Fonte da imagem: Visual China

Autor colaborador | Zhou Zihao

Editor | Wang Weikai

Nota do editor:

desdeIA aberta A caixa de Pandora da IA ​​generativa foi aberta. Os grandes modelos ainda serão a tendência mais quente em 2024. Como berço da tecnologia, o Vale do Silício está inundado de talentos. Qualquer organização excelente deve ter encontrado um método e ferramentas correspondentes para estimular ao máximo a criatividade de cada indivíduo. Mas o mais importante é capturar esses momentos fugazes de genialidade. "AI Lightyear" registra as mudanças atuais em grandes empresas modelo no país e no exterior entrevistando funcionários de algumas empresas de IA: Onde estão os talentos que controlarão o futuro? É para o segundo artigo.

Dirigindo quase 64 quilômetros de Sunnyvale até o centro de São Francisco, Zhao Ming, estudante de mestrado na Universidade de Stanford, participará de um evento de capital de risco de IA. Esta é a trilha de atividades de Zhao Ming em uma noite de fim de semana em junho.

Parceiros de um fundo local em dólares do Vale do Silício sediaram o evento. Os participantes incluem os fundadores de dezenas de startups de IA e cerca de 50 investidores representando diferentes capitais. Durante o evento, empreendedores subiram ao palco para vender suas ideias aos investidores, enquanto engenheiros de IA observavam o “mercado” na plateia.

“Essa cena acontece todas as semanas no Vale do Silício”, disse Zhao Ming ao autor de “AI Lightyear”. Com a ajuda de um amigo, ele conseguiu um ingresso. Zhao Ming se formou em ciência da computação na Universidade de Stanford e agora está determinado a entrar na indústria de IA.

Ele espera conhecer mais profissionais de tecnologia neste evento para obter informações de ponta no setor. No entanto, o que o surpreendeu foi que metade dos mais de 400 participantes eram chineses.

À medida que conversavam, as identidades dessas pessoas tornaram-se gradualmente claras: havia capitalistas de risco que vieram de Pequim em busca de oportunidades de investimento, também havia engenheiros de software chineses que trabalharam para Google, Microsoft, etc.; alguns chineses que estudavam IA nas melhores universidades dos Estados Unidos.

Eles são o epítome do povo chinês no Vale do Silício. Um relatório (2022) do American McCropolo Think Tank mostra que entre os principais pesquisadores de inteligência artificial que trabalhavam nos Estados Unidos naquela época, os pesquisadores da China representavam 38%, e os americanos representavam 37% deles. Em 2019, estes dois números ainda eram de 27% e 31%.

Os chineses sempre foram a “espinha dorsal” do círculo tecnológico do Vale do Silício. Agora, sob a nova onda de IA, que tipo de altos e baixos estão enfrentando os jovens chineses no Vale do Silício?

“Vá para o Vale do Silício, vá para o lugar mais próximo das novas forças produtivas.”

“Muitos dos técnicos de IA no Vale do Silício são chineses”, disse Qin Tian ao autor.

Ele é engenheiro de aprendizado de máquina (MLE) em uma conhecida empresa de tecnologia no Vale do Silício. Depois de se formar em uma universidade TOP30 dos Estados Unidos com mestrado em ciência da computação em 2019, ele começou a se envolver em pesquisas de algoritmos relacionados à IA no Vale do Silício. Na sua equipa, os engenheiros chineses representam quase 40%. “Os outros são principalmente da Índia e alguns são europeus de Leste da Roménia e de outros países”.

De acordo com um relatório da Silicon Valley Indicators, a população do Vale do Silício é composta principalmente por asiáticos e brancos e, entre a população asiática, os chineses representam a maior proporção. Em 2022, os chineses representavam 31% da população asiática, tornando-se um dos grupos asiáticos mais importantes no Vale do Silício. Antes disso, muitos dos amigos chineses de Qin Tian eram engenheiros de software.

Mas no início de 2022,IA abertaApós o lançamento das versões mais recentes do GPT3 e DALL-E 2, esta situação foi quebrada e muitas pessoas começaram a se transformar em IA.

Tomemos como exemplo Qin Tian. Anteriormente, sua linha de negócios ainda estava desenvolvendo um aplicativo de câmera móvel com funções de IA. Em junho de 2022, a empresa anunciou repentinamente um ajuste estratégico, cortando sua linha de produtos de quase cinco anos e mudando para o campo de modelos de grande porte.

Na verdade, este tipo de ajuste não é incomum em 2022. Naquele ano, muitos gigantes da tecnologia no Vale do Silício, como Meta, Adobe e Google, fizeram grandes ajustes nos negócios e desenvolveram grandes modelos de IA, seguindo os passos da OpenAI. Esta mudança também levou um grande número de engenheiros de software a migrar para o setor empresarial de inteligência artificial, muitos dos quais são chineses.

Zhang Yu, que se formou na Carnegie Mellon University, trabalha atualmente na empresa-mãe do GooglePiloto automáticoempresaWaymo Work, responsável pela pesquisa e desenvolvimento de sistemas de IA montados em veículos. Zhang Yu apresentou,Bate-papoGPT-4 Após seu surgimento, Waymo passou por uma onda de demissões, e alguns colegas chineses também optaram por sair. “A taxa de rotatividade é variável e alguns grupos podem perder uma pessoa por semana”, disse Zhang Yu.

A maioria desses colegas mudou para empresas de tecnologia envolvidas na pesquisa e desenvolvimento de grandes modelos de linguagem ou retornou ao Google para ser responsável pela pesquisa e desenvolvimento de IA de outros produtos. Zhang Yu lamentou: “No Vale do Silício,GPT Tornou-se um campo mais popular do que a condução autônoma. "

Aderindo a essa onda de IA não estão apenas os “velhos engenheiros” que trabalharam duro no Vale do Silício por muitos anos, mas também os “recém-chegados” que vêm da China para acompanhar a tendência.

Shi Qi, 25 anos, é um deles. Em maio deste ano, ele voou da China para São Francisco e decidiu ingressar em uma empresa start-up com foco em IA. Shi Qi não tem certeza de quantas pessoas como ele vieram da China para cá este ano, mas acredita: “Talento e capital sempre fluirão para lugares com produtividade mais avançada”.

A decisão de Shiqi de vir para o Vale do Silício não foi impulsiva. Antes disso, ele era engenheiro de software. Depois de se formar na faculdade em 2021, trabalhou em uma grande empresa nacional de Internet. No início, Shi Qi, que era novo no local de trabalho, queria "exibir seus talentos com flexibilidade" tanto quanto possível na linha de negócios. Mais tarde, porém, ele sentiu cada vez mais que o trabalho real estava se desviando de suas expectativas.

Por volta de 2022, a linha de produtos da Shi Qi entrou em crescimento estagnado: não importa quanta otimização da experiência do produto fosse feita, o número de usuários não veria mais um crescimento revolucionário. “A era das ações parece ter realmente chegado.” Shi Qi sente que entrou em um “estado de aposentadoria” mais cedo. Ele mantém o sistema todos os dias e faz algumas modificações no código de acordo com as necessidades, e é isso.

Os dias de trabalho das 10 às 6 e a saída pontual do trabalho, não mais 996, fizeram com que Shi Qi se sentisse ameaçado. Embora eu seja “livre”, isso também significa que “é a mesma coisa com ou sem você”.

Esta situação levou-o a ter a ideia de trabalhar a tempo parcial. Por acaso, Shi Qi passou em uma entrevista com uma empresa start-up de IA em Michigan, EUA, e começou a trabalhar remotamente para ela. Na primavera de 2022, o chefe da empresa enviou repentinamente uma mensagem a Shi Qi, dizendo que a empresa havia obtido um novo modelo, o mais recente InstructGPT lançado pela OpenAI, e o convidou para participar do teste interno.

“Isso é completamente diferente da IA ​​que vi antes.” Shi Qi suspirou. Embora o GPT-3 tenha sido lançado já em 2020, o InstructGPT usa aprendizagem por reforço de feedback humano (RLHF) para gerar respostas que são mais consistentes com as preferências e intenções humanas. Shi Qi teve uma intuição: “Pode trazer algo diferente”.

Desde então, a empresa de Shi Qi começou a acessar este modelo de linguagem em larga escala para desenvolver novos produtos. Isso também fez com que Shi Qi sentisse a lacuna na promoção da IA ​​entre a China e os Estados Unidos: naquela época, poucos engenheiros de software ao redor de Shi Qi haviam sido expostos ao GPT e ninguém no escritório falava sobre o papel do transformador. Mas nos Estados Unidos, OpenAI tornou-se um tema quente entre as principais empresas de tecnologia.

Shi Qi lembrou que o primeiro grupo de engenheiros na China que prestou atenção ao GPT adorava visitar o GitHub (comunidade de código aberto). Naquela época, alguns engenheiros do continente começaram a acessar a API do GPT e a fazer alguns aplicativos shell. Mas foi só com o lançamento do GPT-3.5, no final de 2022, que os grandes modelos nacionais começaram a ser procurados pelo capital. Em 2023, também é chamado pela mídia por ter entrado na “Batalha das 100 Modelos”.

No final de 2023, Shi Qi optou por se demitir. Com sua experiência anterior em trabalho remoto, recebeu um convite de sua empresa atual. “Vá para o Vale do Silício, vá para o lugar mais próximo de uma nova produtividade.”

Modelo de grande volume de empresa, empresa start-up luta pelo lado B

Desde que a empresa apostou tudo na IA, Qin Tian sentiu que a pressão no trabalho aumentou.

Antes do verão de 2022, o ambiente de trabalho era relativamente descontraído. De acordo com o entendimento de Qin Tian, ​​“isso se deve às barreiras de concorrência que sobraram da era da informação anterior”. Ele é responsável pelo desenvolvimento de back-end e sai do trabalho no mesmo horário todos os dias. Não há muita pressão para lançar novos produtos "Os produtos antigos da Internet mantêm a receita e é normal que novos produtos sejam lançados após 2-3. anos."

Hoje em dia, as principais empresas de tecnologia do Vale do Silício não ousam afrouxar na competição de IA. O ajuste da linha de negócios tornou a vida diária de Qin Tian mais compacta. Sair do trabalho às 23h tornou-se a norma e fazer horas extras nos finais de semana tornou-se inevitável.

O progresso da OpenAI no AIGC foi muito rápido, colocando muita pressão sobre outras empresas do Vale do Silício. Em fevereiro de 2024, depois que a OpenAI lançou Sora, o preço das ações da empresa de Qin Tian sofreu um golpe violento. Em apenas uma primavera, o preço caiu mais de 30%. No último ano, o mercado de capitais ainda estava cheio de confiança no ajuste estratégico da empresa. Por um período, o preço das ações chegou a subir mais de 60%.

Enfrentando a concorrência de grandes fabricantes como OpenAI, a empresa de Qin Tian acelerou o ritmo de atualizações de produtos e encurtou o ciclo de lançamento para pelo menos uma vez a cada seis meses para garantir que a empresa permaneça competitiva nesta onda de inovação tecnológica e evite ser fotografada em a praia. .

"Os produtos devem ser iterados em um ritmo acelerado e, ao mesmo tempo, mais artigos de ponta devem ser pesquisados." Qin Tian disse que uma nova corrida armamentista tecnológica está ocorrendo no Vale do Silício. Qin Tian é o principal responsável pelo desenvolvimento de grandes modelos multimodais (MLLMs). Simplificando, permite que o modelo aceite entrada de linguagem, vídeo, áudio e outros dados ao mesmo tempo, de modo a compreender e gerar mais conteúdo. de forma abrangente.

O campo da multimodalidade é uma nova mina à espera de ser explorada por engenheiros de IA. Um artigo da indústria publicado em maio mostrou que reduzir o consumo de recursos e, ao mesmo tempo, expandir sua aplicabilidade e minimizar a degradação do desempenho são os principais objetivos de pesquisa e desenvolvimento dos MLLMs atualmente.

Recentemente, MLVU, um benchmark de avaliação de compreensão de vídeo longo multitarefa proposto pela China Wisdom e muitas universidades nacionais, avaliou 20 dos mais recentes modelos grandes multimodais populares e descobriu que a taxa de precisão de seleção única do primeiro classificado GPT-4 foi insuficiente em 65%, os modelos existentes ainda enfrentam enormes desafios na compreensão de vídeos longos.

"Precisamos prestar atenção constantemente ao surgimento de novas tecnologias para lidar com este novo campo." Por exemplo, quando a arquitetura do algoritmo DIT (Diffusion Transformer) usada pela Open AI gera vídeos melhores, Qin Tian e seus colegas irão rastreá-los imediatamente para determinar a direção da iteração do produto.

As grandes empresas estão a avançar rapidamente na via dos grandes modelos, e as empresas startup densamente povoadas em Silicon Valley também estão a criar os seus próprios campos de IA.

De acordo com a observação de Shi Qi, muitas start-ups do Vale do Silício estão desenvolvendo linhas de produtos B-end, o que pode estar relacionado ao passado dos chefes dessas empresas em grandes empresas. “Eles podem usar as conexões acumuladas no trabalho para abrir canais de negócios mais rapidamente”, disse Shi Qi.

Hoje, Shi Qi e sua equipe estão desenvolvendo uma ferramenta de desenvolvedor ponta a ponta para que as empresas melhorem a eficiência do trabalho dos programadores por meio de IA. Em setembro do ano passado, a Microsoft também lançou um "copilot" de aplicativo semelhante. Eles esperam realizar um cenário em que os desenvolvedores possam solicitar a esses assistentes de programação que concluam seu trabalho com mais eficiência ao escrever código.

"Melhorar a eficiência da tecnologia é a direção competitiva de muitas empresas iniciantes nos Estados Unidos.", disse Shi Qi, e de ponta a ponta significa criar um fluxo de trabalho automatizado. Todo o processo é totalmente implementado por IA, e os clientes só precisam estar atentos se os resultados finais gerados atendem às expectativas. “Se quisermos ultrapassar nas curvas, devemos pensar mais na concorrência diferenciada com essas grandes empresas”, disse Shi Qi.

Mas alguns problemas técnicos ainda enfrentam os engenheiros do Vale do Silício. Na opinião de Shiqi, melhorar a precisão do produto é um ponto técnico que precisa ser superado com urgência. Diferentes cenários de usuário têm diferentes padrões de precisão.

Para produtos C-end que focam no companheirismo emocional do usuário, uma taxa de precisão de 70% pode ser suficiente. Mas para as necessidades de nível empresarial, 80% é a meta que eles buscam. Isso também os força a encontrar dados de base de conhecimento mais precisos para treinamento de modelos.

Para competir, é inevitável queimar dinheiro. Para a empresa de Shi Qi, sempre que atende uma empresa, mesmo que seja um projeto de pequena escala, o custo mensal de inferência é de milhares de dólares. “Esse custo único de projeto, em um país em desenvolvimento, é equivalente ao salário mensal de um engenheiro de algoritmos em tempo integral.”

Confrontado com custos elevados, Shi Qi afirmou francamente que a empresa ainda não alcançou rentabilidade, mas recentemente várias empresas de tamanho considerável assinaram contratos de serviços com eles e esperam alcançar rentabilidade num ano. “Pelo menos pagar é um sinal positivo”, disse Shi Qi.

Demissões, empreendedorismo e retorno à China: o trio do Vale do Silício

De acordo com estatísticas do Índice do Vale do Silício, de 2019 a 2023, quase 3.000 startups nasceram no Vale do Silício e na área de São Francisco, atingindo um recorde. Entre eles, você pode ver os nomes de muitos CEOs chineses. Atualmente, quatro empresas de IA fundadas na China – Scale AI, Cognition AI, Imbue e Cresta – juntaram-se às fileiras dos unicórnios, com uma avaliação total de mais de 18 mil milhões de dólares.

Em Silicon Valley, nunca faltaram mitos sobre a riqueza empresarial, mas face à concorrência acirrada, o empreendedorismo também significa riscos. No círculo de amigos de Qin Tian, ​​ainda há um pequeno número de engenheiros chineses que deixaram grandes fábricas para iniciar seus próprios negócios, e mais pessoas ainda optam por esperar para ver.

Ao mesmo tempo, Silicon Valley tem vivido uma onda sustentada de despedimentos ao longo dos últimos dois anos, mesmo quando a IA provocou uma nova onda de entusiasmo nos mercados de capitais.

Aria, que trabalha no Vale do Silício, revelou ao autor de “AI Light Years” que muitos colegas chineses ao seu redor foram afetados por esta onda de demissões. Segundo ela, os engenheiros demitidos estão principalmente envolvidos na escrita ou depuração básica de código e outros trabalhos de depuração. Obviamente, este é um tipo de trabalho que pode ser facilmente substituído pela IA.

Mais de 400.000 empregos em tecnologia foram cortados desde o início de 2022, de acordo com estimativas do rastreador de empregos Layoffs.fyi. Outro dado é que entre 2022 e 2023, o número total de demissões globais por parte de empresas de tecnologia dos EUA ultrapassará 500 mil. Este é o maior lote de demissões na indústria de tecnologia desde a crise financeira de 2008.

Qin Tian também sente claramente que haverá muito menos oportunidades de emprego no Vale do Silício em 2024 do que em 2019.

No final do ano passado, a taxa de inflação dos EUA já esteve abaixo de 3% numa base anualizada, o que era quase metade em comparação com 6% no início de 2023. A CGC, uma empresa de análise de emprego do Vale do Silício, explicou que depois que a taxa de inflação cair, as empresas de tecnologia não terão espaço para aumentar os preços e não serão capazes de melhorar o desempenho através de aumentos de preços.

“Um engenheiro chinês que foi demitido pelo Google certa vez veio à nossa empresa para uma entrevista”, disse Shi Qi ao autor de “AI Lightyear”, mas sua empresa acabou não o contratando. De acordo com Qin Tian, ​​​​no Vale do Silício, o salário médio anual de um engenheiro de pesquisa de algoritmos de IA que trabalhou por cerca de três anos é de cerca de US$ 450 mil, o que é uma despesa considerável para muitas empresas iniciantes.

“A onda de demissões desencorajou muitos chineses que têm sonhos empreendedores de agir”, disse Qin Tian.

Por outro lado, as rigorosas regulamentações em matéria de vistos também fazem com que lhes falte “liberdade de escolha”. De acordo com os regulamentos de imigração dos EUA, antes de obterem um green card, os desempregados que possuem um visto de estágio OPT ou um visto de trabalho H-1B devem encontrar um novo emprego dentro de 60 ou 90 dias, caso contrário, correrão o risco de serem deportados de volta para seus países de origem. país.

Se o empreendimento fracassar, o desemprego poderá impedi-los de permanecer no Vale do Silício. Aria acredita que agora não é um bom momento para iniciar um negócio de IA. Semelhante à situação enfrentada por muitas empresas chinesas de IA, no Vale do Silício, “como conseguir uma boa comercialização de produtos de IA ainda é um problema”.

Do outro lado do oceano, na China, o entusiasmo pela IA parece ter atingido o seu clímax. Não muito tempo atrás, a Conferência Mundial de Inteligência Artificial acabou de ser concluída em Xangai. Estando em um país estrangeiro e limitado por sua energia de trabalho, Qin Tian presta menos atenção aos novos desenvolvimentos no desenvolvimento da indústria doméstica de IA, mas acredita que os estudiosos nacionais já estão muito avançados na pesquisa de algoritmos de IA.

Nas classificações mundiais de modelos de código aberto divulgadas pela Hugging Face, a maior comunidade de grandes modelos de código aberto do mundo, vários modelos de código aberto da China já ocuparam a vanguarda.

No entanto, Qin Tian não tem planos de retornar à China para desenvolvimento no curto prazo. Ele acredita que o poder computacional é crucial para o treinamento de grandes modelos, e a falta de poder computacional avançado sempre foi um problema que as empresas chinesas de IA enfrentam. resolver.

Em agosto de 2022, a Nvidia recebeu um aviso dos Estados Unidos exigindo que ela parasse de exportar chips A100 e H100 para a China.

Em 17 de julho deste ano, a Bloomberg informou que a administração Biden estava a considerar a possibilidade de introduzir regulamentações reforçadas que permitiriam controlos sobre produtos estrangeiros utilizando qualquer tecnologia fabricada nos Estados Unidos. Ele terá como alvo as operações na China de empresas como a japonesa Tokyo Electron e a ASML, que tornam as máquinas de fabricação de chips cruciais para a indústria.

Fatores geopolíticos fizeram com que muitos talentos técnicos de IA no Vale do Silício duvidassem do desenvolvimento de seu emprego após retornarem à China.

“Mesmo que a competição profissional seja acirrada, você não pode desistir de ir para o Vale do Silício.” Zhao Ming, estudante de mestrado na Universidade de Stanford, lamentou ao autor que muitos estudantes de mestrado em IA nos Estados Unidos consideram estudar nos Estados Unidos. como sua primeira escolha. Por esta razão, muitos estudantes acompanharão as últimas atividades de intercâmbio do setor em plataformas de atividades como a "luma". Na sua opinião, encontrar um emprego através das redes sociais é o atalho mais realista no Vale do Silício neste momento.

Em maio deste ano, no Fórum Yabuli, Ding Jian, diretor administrativo e sócio da Jinshajiang Venture Capital, disse que no passado, mais de 70% dos estudantes de pós-graduação em IA do Vale do Silício poderiam retornar à China, mas agora quase nenhum.

“Mesmo que você não possa garantir um green card, ter experiência de trabalho no Vale do Silício definitivamente não é uma coisa ruim”, disse Zhao Ming.

(Zhao Ming, Qin Tian, ​​​​Zhang Yu Shiqi são todos pseudônimos)