noticias

niñas de la universidad de pekín posteriores al año 2000 crean una plataforma de animación 4d generada por ia

2024-09-18

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

nombre completo de la empresa: beijing yunke technology co., ltd.

rondas de financiación: ángel + ronda

productos/servicios: aiuni: plataforma de animación 4d generada por ia

fundador: hu yating (número 25 de entrepreneurship star camp)

año de nacimiento: 2000

formación académica: departamento de ciencias de la computación, universidad de pekín

autor |

editor: liu hengtao

fuente de la imagen | proporcionada por aiuni

hu yating, nacido en la década de 2000, decidió iniciar un negocio después de graduarse de la universidad. hu yating tiene una apariencia hermosa y ropa de moda, lo que refresca por completo nuestra imaginación sobre la imagen de un emprendedor.

hu yating, graduada del departamento de ciencias de la computación de la universidad de pekín, trabajó para google, alibaba y bytedance como ingeniera de algoritmos. también participó en la olimpiada de informática y ganó la medalla de oro nacional y el premio a la mejor atleta femenina. durante su pasantía en una gran fábrica, vio que el tráfico de internet había alcanzado su punto máximo, pero que el 3d aumentaba la dimensionalidad del contenido, por lo que decidió iniciar un negocio después de graduarse de la universidad.

aiuni, fundada por hu yating, es una plataforma ip para animaciones 4d generadas por ia. en junio de este año, el modelo unique3d generado en 3d de aiuniai fue de código abierto en github, huggingface y otras plataformas. rápidamente entró en la clasificación de modelos populares en huggingface. nominado como el "modelo más popular" "generar modelos 3d a partir de las mejores imágenes" ha ganado elogios de muchos desarrolladores.

unique3d es capaz de generar mallas 3d de alta fidelidad y con diversas texturas a partir de una imagen de vista única en aproximadamente 30 segundos en una tarjeta gráfica 4090. muchos internautas compartieron los resultados de su generación en las redes sociales y elogiaron el modelo por alcanzar un nivel muy alto en términos de fidelidad, coherencia y eficiencia. en apenas unos meses, unique3d ha alcanzado millones de copias generadas.

este verano, hu yating se unió a la fase 25 de entrepreneurship star camp, el programa de aceleración de estrellas de ia de vanguardia de star camp.

después de la aceleración, estará en el escenario de 2024demo china del 19 al 20 de este mes, mostrando sus opiniones sobre los productos y aplicaciones comerciales a inversores reconocidos, expertos de la industria y socios de la industria en diversos campos de una manera avanzada. manera.

apuntando al mercado 3d

como medio clave para mapear el mundo real en el mundo de internet, la tecnología 3d ha penetrado en varios campos, desde el desarrollo de juegos, la producción de películas hasta el diseño de productos, la representación del comercio electrónico y la planificación arquitectónica. los escenarios de aplicación de la tecnología 3d cubren casi todo. toda la industria de internet.

dependiendo del escenario de aplicación, el costo del modelado 3d también varía. cuanto más detallado es el modelo, más engorroso es el proceso de producción, el ciclo de producción es largo y el costo es alto. el costo de creación de cada modelo 3d requiere al menos varios. mil o incluso decenas de miles de yuanes.

actualmente, la animación, el cine, la televisión, los juegos y otras industrias del entretenimiento son los principales campos de aplicación del modelado 3d. en la industria de los juegos, con el desarrollo continuo de motores 3d, los juegos 3d se han convertido gradualmente en la corriente principal del mercado, y la demanda de modelado 3d es extremadamente alta en la industria del cine y la televisión de animación, utilizando tecnología 3d solo para crear grandes escenas; requiere tecnología de pantalla verde y actores importantes que se puedan completar, lo que reduce el costo de personal del drama.

según datos publicados por toubao, el espacio del mercado de modelado 3d de china alcanzará los 10,34 mil millones de yuanes en 2021, y se espera que el tamaño del mercado alcance los 19,57 mil millones de yuanes en 2026. se estima que el tamaño del mercado mundial de animación 3d en 2021 será de alrededor de 164 mil millones de dólares, y se espera que el mercado crezca a una tasa de crecimiento anual compuesta (cagr) del 11,5%, alcanzando alrededor de 310 mil millones de dólares en 2026.

el equipo de aiuni se dirige a este mercado.

además de hu yating, el socio técnico de la empresa, wu kailu, conoció a hu yating cuando ella participó en la olimpiada de informática. se graduó de la clase yao de la universidad de tsinghua y participó en investigaciones en dirección de generación 3d y nerf en el instituto de información interdisciplinaria de. universidad de tsinghua. publicó muchos artículos durante su período universitario. el artículo propone de manera innovadora fsd (destilación fraccionada de flujo de texto a 3d) y memsr (entrenamiento eficiente del modelo de superresolución). una vez participó en el equipo nacional de entrenamiento de la olimpiada de informática y se reunió durante la competencia. ren jinshan, socia operativa de la empresa, es una ex defensora de las artes liberales. se graduó en la escuela de administración guanghua de la universidad de pekín y tiene una maestría en teoría del arte de la universidad de chicago.

aiuni ha recibido con éxito tres rondas de financiación, incluidas rondas ángel+.

crear modelos verticales para formar ventajas técnicas.

en el proceso de creación de productos, hu yating descubrió que, dado que casi todas las animaciones y juegos giran en torno a personajes, los más valiosos de todos los tipos de activos 3d son los personajes. además, muchos usuarios están recreando personajes clásicos o tienen personajes originales que quieren realizar, y la demanda de originalidad es relativamente grande. hu yating cree que esta parte es más adecuada para generarla con aigc.

"estos usuarios esperan generar personajes 3d de manera conveniente y económica, pero el costo del modelado 3d es alto y, en la mayoría de los casos, sólo se puede utilizar en estudios de cara b, como animación, cine y televisión".

cuando se utiliza la ia para reducir al extremo el umbral del modelado 3d, los usuarios que antes no podían crear contenido 3d tendrán la posibilidad de crear nuevos trabajos 3d de forma independiente.

"la mayor parte del contenido de vídeo que vemos ahora se graba en tiempo real. en el futuro, el contenido de animación y efectos especiales basado en modelos 3d se convertirá en vídeos cortos, y la cantidad de vídeo y creatividad aumentará considerablemente". dicho.

en comparación con otras imágenes, la generación de personajes es más difícil. hu yating dijo: "debido a que los modelos 3d son escenas relativamente profesionales, aiuni se encargará a continuación de la generación de personajes, la generación de animaciones y la síntesis de video para brindar servicios a los creadores de contenido digital. todo esto plantea requisitos más altos para la precisión del modelo. dado que se trata de dimensiones finas como huesos humanos y accesorios de vestir, se requiere una gran cantidad de detalles y datos, y el procesamiento de datos geométricos es un gran desafío al mismo tiempo, porque necesita soportar las posturas del modelo estándar (es decir, una pose), el material y la acción. los datos también deben ser más detallados.

la solución de aiuni es lograr una precisión de nivel sota a través de la innovación en la arquitectura de algoritmos. en comparación con métodos anteriores como score distillation sampling (sds), aiuni resuelve los problemas de generación de modelos que requieren optimización a largo plazo, mala calidad geométrica e inconsistencia. al mismo tiempo, el equipo también optimizó el problema de que el método basado en el modelo de difusión de múltiples vistas está limitado por la inconsistencia local y la resolución de generación, lo que dificulta la producción de texturas finas y detalles geométricos complejos por primera vez. se incrementó de 256 a 2k/8k, cumpliendo con los requisitos del usuario en cuanto a precisión y calidad del modelo.

según el artículo de unique3d, esta solución puede producir mejores resultados 3d a través de un modelo de difusión de múltiples vistas y el correspondiente modelo de difusión normal, un proceso de actualización de múltiples niveles y un algoritmo de reconstrucción de malla instantáneo y consistente isomer. en experimentos, el modelo de aiuni se comparó con instantmesh, crm y openlrm, y pudo generar geometrías más precisas y texturas detalladas, significativamente mejores que otros modelos.

"unique3d tiene su capacidad de generación y generalización, y de hecho puede usarse en motores de renderizado para crear contenido que sea muy valioso para los usuarios". hu yating cree que, en comparación con los productos de la competencia, la ventaja de unique3d es que puede renderizar 3d con gráficos cg e ia diferenciables. bien combinado.

en comparación con los grandes modelos generalizados de los grandes fabricantes, hu yating cree que aiuni fabrica más modalidades y es más vertical. “de hecho, tenemos modelos verticales con múltiples modalidades diferentes, como modelos de configuración de personajes, modelos 3d, vinculación automática o generación de acciones. datos y renderizado de modelos sintéticos, etc., los uniremos verticalmente, y esto no es una cuestión de pura potencia informática o datos, y requiere cierta innovación en la arquitectura del algoritmo”.

la generalización de modelos de video grandes es relativamente fuerte, pero es difícil controlar la consistencia de los caracteres, la controlabilidad de las acciones, los costos de entrenamiento de generación y la eficiencia de la inferencia. en comparación, aiuni tiene mayores ventajas en estos aspectos.

del 3d al 4d para creadores de propiedad intelectual globales

en el sitio web aiuni.ai, actualmente existen dos funciones en línea que pueden generar mundos 3d y modelos 3d respectivamente. hu yating reveló que las próximas funciones que lanzará aiuni girarán en torno al modo de vídeo animado: generar personajes 3d, generar animaciones de personajes, reemplazar vídeos de la vida real con personajes 3d, sintetizar animaciones de personajes en vídeos reales, etc. esta es también la dirección en la que está trabajando el equipo de aiuni: contenido dinámico 3d (es decir, 4d).

el equipo de aiuni cree que la tendencia de desarrollo de la multimodalidad aigc es desde generar 2d hasta generar modelos 3d y finalmente generar contenido 4d. generar imágenes 2d a partir de texto es sólo el comienzo. dar dimensiones espaciales a las imágenes 2d crea un modelo 3d, que también es el soporte básico de la computación espacial del futuro. esperan que en el futuro esta función pueda dar a los modelos 3d una dimensión temporal y convertirse en contenido 4d interactivo de alta frecuencia.

"después de generar el modelo de personaje 3d, podemos continuar extendiéndolo a 4d, como cambiar el movimiento del modelo o dejar que el modelo interactúe con el usuario. también podemos tener capacidades de renderizado de video e interacción de voz. cualquier el modelo puede continuar creando contenido dinámico". hu yating dijo que para completar el proceso desde el habla natural hasta las imágenes, pasando por modelos 3d y videos dinámicos, lo más importante en todo el flujo de trabajo es la combinación de tecnología de inteligencia artificial y gráficos cg.

con base en esta expectativa, aiuni lanzó por primera vez una versión beta interna de generación de modelos 3d en abril y emitió códigos de invitación a través de algunos canales. en octubre de este año, la compañía espera lanzar una nueva versión beta pública, dirigida a usuarios creadores de ip de animación de personajes.

"es posible que un usuario no haya utilizado herramientas profesionales 3d antes, pero puede que simplemente sea un entusiasta de los juegos o animaciones de acgn. a través de nuestra plataforma, también puede crear creaciones originales o de contenido para sus personajes ip favoritos, y en la plataforma puede exportar animaciones. videos y difundirlos en comunidades de creadores y nuevas plataformas de medios "hu yating dijo que la nueva versión beta pública admitirá la generación de personajes y animaciones, y es adecuada para escenas como videos orales y videos de baile.

en términos de modelo de negocio, el plan de aiuni es lanzar diferentes modelos de carga para creadores profesionales y entusiastas de la propiedad intelectual. los usuarios profesionales de 3d necesitan datos originales en 3d y la plataforma puede mejorar su productividad, por lo que estarán muy dispuestos a pagar; para los creadores de ip de nuevos medios, las tarifas simbólicas se cobran principalmente en función del tiempo de generación y la precisión de la representación. para otros tipos de usuarios, la economía de los creadores es más diversa. por ejemplo, algunos usuarios quieren agregar modelos de voz personalizados para los personajes o utilizar modelos de impresión 3d para producir otros derivados de propiedad intelectual.

hu yating dijo que aiuni se orientará hacia nuevos escenarios de medios creados por ip en el futuro y lanzará gradualmente más algoritmos multimodales que combinen tecnología de inteligencia artificial con arte generado por computadora. los usuarios extranjeros de aiuniai representan el 70% y la plataforma funcionará para creadores globales. hu yating dijo que la modalidad 3d/4d todavía es algo nuevo, que los chinos están haciendo más y que la compañía no tiene productos competidores directos en el extranjero.

"nuestra misión es crear una plataforma ip para animación 4d generada por ia, orientada a creadores de contenido digital de nuevos medios. la generación 3d es nuestro primer paso. tenemos espacio creativo ilimitado en este nuevo modo, y también creemos en aigc combinando contenido con dimensionalidad dará vitalidad infinita a la nueva generación de creación de propiedad intelectual", afirmó hu yating.

la revolución del paradigma industrial provocada por la tecnología de inteligencia artificial ha permitido a muchos jóvenes emprendedores como hu yating hacer realidad sus sueños.