notícias

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

nome completo da empresa: beijing yunke technology co., ltd.

rodadas de financiamento: angel + rodada

produtos/serviços: aiuni — plataforma de animação 4d gerada por ia

fundador: hu yating (25ª edição do entrepreneurship star camp)

ano de nascimento: 2000

formação educacional: departamento de ciência da computação, universidade de pequim

autor | ma wenpei

editor丨liu hengtao

fonte da imagem | fornecida por aiuni

hu yating, nascido na década de 2000, optou por abrir um negócio depois de se formar na universidade. hu yating tem uma bela aparência e roupas da moda, o que refresca completamente o nosso imaginário da imagem de empresário.

hu yating, que se formou no departamento de ciência da computação da universidade de pequim, trabalhou para google, alibaba e bytedance como engenheira de algoritmos. ela também participou da olimpíada de informática e ganhou a medalha de ouro nacional e o prêmio de melhor atleta feminina. durante o estágio em uma grande fábrica, ela viu que o tráfego da internet havia atingido o pico, mas o 3d era um aumento na dimensionalidade do conteúdo, então decidiu abrir um negócio após se formar na faculdade.

aiuni, fundada por hu yating, é uma plataforma ip para animações 4d geradas por ia. em junho deste ano, o modelo unique3d gerado em 3d da aiuniai foi aberto no github, huggingface e outras plataformas. ele rapidamente entrou no ranking de modelos populares no huggingface. nomeado como o "modelo mais popular". "gerando modelos 3d a partir das melhores imagens" ganhou elogios de muitos desenvolvedores.

unique3d é capaz de gerar malhas 3d de alta fidelidade e texturas diversas a partir de uma imagem de visualização única em aproximadamente 30 segundos em uma placa gráfica 4090. muitos internautas compartilharam os resultados de sua geração nas redes sociais e elogiaram o modelo por atingir um nível muito alto em termos de fidelidade, consistência e eficiência. em apenas alguns meses, unique3d atingiu milhões de cópias geradas.

neste verão, hu yating juntou-se à 25ª fase do entrepreneurship star camp - o programa de aceleração de estrelas de ia de ponta do star camp.

após a aceleração, ela estará no palco do 2024demo china de 19 a 20 deste mês, mostrando sua opinião sobre os produtos e aplicações comerciais para investidores renomados, especialistas do setor e parceiros do setor em diversas áreas de forma avançada maneiras.

visando o mercado 3d

como um meio fundamental de mapear o mundo real no mundo da internet, a tecnologia 3d penetrou em vários campos, desde o desenvolvimento de jogos, produção de filmes até design de produtos, renderização de comércio eletrônico e planejamento arquitetônico. os cenários de aplicação da tecnologia 3d cobrem quase todos. toda a indústria da internet.

dependendo do cenário de aplicação, o custo da modelagem 3d também varia. quanto mais detalhado o modelo, mais complicado é o processo de produção, o ciclo de produção é longo e o custo é alto. o custo de criação de cada modelo 3d requer pelo menos vários. milhares ou mesmo dezenas de milhares de yuans.

atualmente, as indústrias de animação, cinema, televisão, jogos e outras indústrias de entretenimento são os principais campos de aplicação da modelagem 3d. na indústria de jogos, com o desenvolvimento contínuo de motores 3d, os jogos 3d tornaram-se gradualmente o mainstream do mercado, e a demanda por modelagem 3d é extremamente alta na indústria de filmes de animação e televisão, usando a tecnologia 3d apenas para criar grandes cenas; requer tecnologia de tela verde e atores importantes. pode ser concluído, o que reduz o custo de pessoal do drama.

de acordo com dados divulgados por toubao, o espaço de mercado de modelagem 3d da china atingirá 10,34 bilhões de yuans em 2021, e espera-se que o tamanho do mercado atinja 19,57 bilhões de yuans até 2026. o tamanho do mercado global de animação 3d em 2021 é estimado em cerca de us$ 164 bilhões, e espera-se que o mercado cresça a uma taxa composta de crescimento anual (cagr) de 11,5%, atingindo cerca de us$ 310 bilhões até 2026.

a equipe aiuni tem como alvo esse mercado.

além de hu yating, o parceiro técnico da empresa, wu kailu, conheceu hu yating quando ela participou da olimpíada de informática. ele se formou na classe yao da universidade de tsinghua e se envolveu em pesquisas na direção de geração 3d e nerf no instituto de informação interdisciplinar de. universidade de tsinghua. ele publicou muitos artigos durante seu período de graduação. o artigo propõe de forma inovadora fsd (destilação fracionada de fluxo de texto para 3d) e memsr (treinamento eficiente de modelo de super-resolução). certa vez, ele participou da seleção nacional de treinamento da olimpíada de informática e se reuniu durante a competição. ren jinshan, sócio operacional da empresa, é ex-campeão das artes liberais. ela se formou na escola de administração guanghua da universidade de pequim e possui mestrado em teoria da arte pela universidade de chicago.

aiuni recebeu com sucesso três rodadas de financiamento, incluindo rodadas angel+.

crie modelos verticais para formar vantagens técnicas

no processo de fabricação dos produtos, hu yating descobriu que, como quase todas as animações e jogos giram em torno de personagens, o mais valioso de todos os tipos de recursos 3d são os personagens. além disso, muitos usuários estão recriando personagens clássicos ou têm personagens originais que desejam realizar, e a demanda por originalidade é relativamente grande. hu yating acredita que esta parte é mais adequada para ser gerada com aigc.

"esses usuários esperam gerar personagens 3d de maneira conveniente e barata, mas o custo da modelagem 3d é alto e, na maioria dos casos, só pode ser usado em estúdios secundários, como animação, cinema e televisão."

quando a ia é usada para reduzir ao extremo o limite da modelagem 3d, os usuários que anteriormente não conseguiam criar conteúdo 3d terão a capacidade de criar novos trabalhos 3d de forma independente.

"a maior parte do conteúdo de vídeo que vemos agora é filmado em tempo real. no futuro, o conteúdo de animação e efeitos especiais baseado em modelos 3d será transformado em vídeos curtos, e a quantidade de vídeo e criatividade aumentará bastante." disse.

comparada com outras imagens, a geração de personagens é mais difícil. hu yating disse: "como os modelos 3d são cenas relativamente profissionais, aiuni fará a próxima geração de personagens, geração de animação e síntese de vídeo para fornecer serviços para criadores de conteúdo digital. todos eles apresentam requisitos mais elevados para a precisão do modelo. uma vez que envolve dimensões finas. como ossos humanos e acessórios de vestuário, são necessárias uma grande quantidade de detalhes e dados, e o processamento de dados geométricos é um enorme desafio, porque precisa suportar poses de modelo padrão (ou seja, uma pose), o material e a ação. os dados também precisam ser mais detalhados.

a solução da aiuni é alcançar a precisão do nível sota por meio da inovação da arquitetura de algoritmos. em comparação com métodos anteriores, como score distillation sampling (sds), a aiuni resolve os problemas de geração de modelos que exigem otimização de longo prazo, baixa qualidade geométrica e inconsistência. ao mesmo tempo, a equipe também otimizou o problema de que o método baseado no modelo de difusão multivisualização é limitado pela inconsistência local e pela resolução de geração, dificultando a produção de texturas finas e detalhes geométricos complexos. foi aumentado do nível 256 para 2k/8k, atendendo aos requisitos do usuário para precisão e qualidade do modelo.

de acordo com o artigo unique3d, esta solução pode produzir melhores resultados 3d por meio de um modelo de difusão multivisualização e modelo de difusão normal correspondente, um processo de atualização multinível e um algoritmo de reconstrução de malha instantâneo e consistente isomer. em experimentos, o modelo da aiuni foi comparado com instantmesh, crm e openlrm, e foi capaz de gerar geometrias e texturas detalhadas mais precisas, significativamente melhores que outros modelos.

"o unique3d tem sua capacidade de geração e generalização e pode realmente ser usado em mecanismos de renderização para criar conteúdo que é muito valioso para os usuários." hu yating acredita que, em comparação com produtos concorrentes, a vantagem do unique3d é que ele pode gerar gráficos cg e renderização 3d diferenciáveis ​​por ia. bem combinado.

comparado com os grandes modelos generalizados dos grandes fabricantes, hu yating acredita que aiuni faz mais modalidades e é mais vertical “na verdade, temos modelos verticais com múltiplas modalidades diferentes, como modelos de configuração de personagens, modelos 3d, encadernação automática ou geração de ação. dados e renderização de modelos sintéticos, etc., iremos encadeá-los verticalmente, e isso não é uma questão de puro poder de computação ou dados, e requer alguma inovação na arquitetura de algoritmos.”

a generalização de grandes modelos de vídeo é relativamente forte, mas é difícil controlar a consistência dos caracteres, a controlabilidade da ação, os custos de treinamento de geração e a eficiência de inferência. em comparação, aiuni tem maiores vantagens nesses aspectos.

de 3d a 4d para criadores globais de ip

no site aiuni.ai, existem atualmente duas funções online que podem gerar mundos 3d e modelos 3d respectivamente. hu yating revelou que as próximas funções que aiuni lançará girarão em torno do modo de vídeo animado – geração de personagens 3d, geração de animações de personagens, substituição de vídeos da vida real por personagens 3d, síntese de animações de personagens em vídeos reais, etc. esta é também a direção que a equipa da aiuni está a trabalhar, nomeadamente conteúdo 3d dinâmico (ou seja, 4d).

a equipe aiuni acredita que a tendência de desenvolvimento da multimodalidade aigc vai da geração 2d à geração de modelos 3d e, finalmente, à geração de conteúdo 4d. a geração de imagens 2d a partir de texto é apenas o começo. dar dimensões espaciais às imagens 2d cria um modelo 3d, que também é o suporte básico da futura computação espacial. eles esperam que, no futuro, esta função possa dar aos modelos 3d uma dimensão temporal e se tornar conteúdo 4d interativo e de alta frequência.

"depois de gerarmos o modelo do personagem 3d, podemos continuar a estendê-lo para 4d, como alterar o movimento do modelo ou deixar o modelo interagir com o usuário. também podemos ter recursos de renderização de vídeo e interação de voz. qualquer modelo pode continuar a criar conteúdo dinâmico." hu yating ele disse que para completar o processo da fala natural às imagens, aos modelos 3d e vídeos dinâmicos, a coisa mais importante em todo o fluxo de trabalho é a combinação de tecnologia de ia e arte gráfica cg.

com base nessa expectativa, a aiuni lançou pela primeira vez uma versão beta interna de geração de modelos 3d em abril e emitiu códigos de convite por meio de alguns canais. em outubro deste ano, a empresa espera lançar uma nova versão beta pública, que é voltada para usuários criadores de ip de animação de personagens.

"um usuário pode não ter usado ferramentas profissionais 3d antes, mas pode ser apenas um entusiasta de jogos ou animações acgn. através de nossa plataforma, ele também pode criar criações originais ou de conteúdo para seus personagens ip favoritos, e na plataforma ele pode exportar animações vídeos e divulgá-los em comunidades de criadores e novas plataformas de mídia "hu yating disse que a nova versão beta pública apoiará a geração de personagens e de animação, e é adequada para cenas como vídeos orais e vídeos de dança.

em termos de modelo de negócios, o plano da aiuni é lançar diversos modelos de cobrança para criadores profissionais e entusiastas de ip. os usuários profissionais 3d precisam de dados originais 3d, e a plataforma pode melhorar sua produtividade, de modo que eles terão uma forte disposição para pagar pelos criadores de ip de novas mídias, as taxas de token são cobradas principalmente com base no tempo de geração e na precisão da renderização. para outros tipos de usuários, a economia do criador é mais diversificada. por exemplo, alguns usuários desejam adicionar modelos de voz personalizados para personagens ou usar modelos de impressão 3d para produzir outros derivados de ip.

hu yating disse que aiuni será orientada para novos cenários de mídia criados por ip no futuro e lançará gradualmente mais algoritmos multimodais combinando tecnologia de ia com arte cg. os usuários estrangeiros da aiuniai representam 70%, e a plataforma operará para criadores globais. hu yating disse que a modalidade 3d/4d ainda é uma coisa nova, que o povo chinês está fazendo mais e que a empresa não tem produtos concorrentes diretos no exterior.

"nossa missão é criar uma plataforma ip para animação 4d gerada por ia, voltada para criadores de conteúdo digital de novas mídias. a geração 3d é o nosso primeiro passo. temos espaço criativo ilimitado nesta nova modalidade e também acreditamos na combinação de conteúdo aigc com dimensionalidade dará vitalidade infinita à nova geração de criação de propriedade intelectual", disse hu yating.

a revolução do paradigma industrial provocada pela tecnologia de ia permitiu que muitos jovens empreendedores como hu yating realizassem os seus sonhos.