noticias

Recientemente, HiDream.ai HiDream.ai HiDream Model 2.0 ha logrado un gran avance en el campo de los videos Wensheng, aumentando el tiempo de generación de videos de 15 segundos el año pasado a un nivel de minutos, esto después de romper el límite de 4 segundos en diciembre del año pasado. Otro salto tecnológico.

La función de vídeo Wensheng de HiDream.ai HiDream.ai 2.0 se ha mejorado significativamente en términos de duración, naturalidad de la imagen, contenido y consistencia de los personajes, gracias a su arquitectura DiT de desarrollo propio. En comparación con la arquitectura tradicional U-Net, la arquitectura DiT tiene mayor flexibilidad y puede mejorar efectivamente la calidad de la generación de imágenes y videos. Como todos sabemos, la implementación básica de la arquitectura DiT se basa en la tecnología Transformer. Para mejorar aún más el rendimiento de esta tecnología, HiDream.ai HiDream Large Model 2.0 adopta módulos completamente de desarrollo propio para toda la estructura de la red Transformer, la composición de datos de capacitación y las estrategias de capacitación, especialmente en términos de investigación en profundidad y estrategias de capacitación. mejora.

Este modelo adopta un mecanismo eficiente de atención conjunta espacio-temporal, que no solo se adapta a las características del dominio espacial y temporal del video, sino que también resuelve el problema de velocidad del mecanismo de atención tradicional en el proceso de entrenamiento. Para respaldar el entrenamiento de videoclips más largos, HiDream.ai HiDream Large Model 2.0 puede procesar videoclips de varios minutos o incluso diez minutos, lo que permite generar directamente videos de minutos de duración. Al mismo tiempo, HiDream.ai también ha desarrollado un modelo de subtítulos para la generación de descripciones de videos para lograr una descripción detallada y precisa del contenido del video.

En términos de estrategia de capacitación, HiDream.ai HiDream Large Model 2.0 utiliza clips de video de diferentes longitudes para el entrenamiento conjunto de datos de video e imágenes, y ajusta dinámicamente la frecuencia de muestreo de videos de diferentes longitudes para completar un entrenamiento de toma larga. Además, el modelo también realiza un análisis químico mejorado basado en los datos de los comentarios de los usuarios.hábito, para optimizar aún más el rendimiento.

Extendido del nivel original de 15 segundos al nivel de minutos, HiDream Large Model 2.0 de HiDream.ai ahora ha logrado un aumento significativo en el tiempo de generación de video, alcanzando el nivel líder en la industria. Además de la mejora significativa de la duración del vídeo en el nivel de minutos, otro punto destacado de esta actualización es la variabilidad de la duración y el tamaño del vídeo. Los modelos de generación de vídeo anteriores suelen tener una duración fija preestablecida y el usuario no puede seleccionarlos. HiDream.ai otorga el derecho de elección a los usuarios. Los usuarios pueden especificar directamente la duración del video o dejar que el sistema juzgue dinámicamente según el contenido del mensaje de entrada. Cuando el contenido es complejo, el sistema generará un video más largo; cuando el contenido es simple, se generará un video más corto. En este método de ajuste dinámico, el sistema puede satisfacer de forma adaptativa las necesidades creativas del usuario. Al mismo tiempo, el tamaño del vídeo también se puede personalizar según las necesidades del usuario. Este diseño flexible mejora enormemente la experiencia del usuario.

Vale la pena mencionar que HiDream Large Model 2.0 de HiDream.ai también ha mejorado significativamente la apariencia de las imágenes de video. Los movimientos de los objetos son más naturales y suaves, los detalles se representan con mayor precisión y es compatible con 4K de ultra alta definición. vídeo. Calidad de imagen clara. Con esta actualización tecnológica, HiDream.ai HiDream Large Model 2.0 se está desarrollando rápidamente hacia la generación de videos de lentes múltiples de mayor calidad y acelerando hacia la etapa L3. Se entiende que la función Vincent Video mejorada se pondrá en uso pronto y los usuarios podrán experimentar servicios de generación de videos más ricos y de mayor calidad.

Los conocedores de la industria dijeron que con la mejora y actualización continua del gran modelo 2.0 de HiDream.ai, se espera que traiga cambios más revolucionarios al campo de la creación de contenido de video, ayude a los usuarios a realizar fácilmente la monetización creativa y promueva toda la industria. avanzar hacia un espacio de desarrollo más amplio.

(Fuente: Información Empresarial Financiera)

Para obtener más información interesante, descargue el cliente "Jimu News" en el mercado de aplicaciones. No reimprima sin autorización. Puede proporcionar pistas de noticias y se le pagará una vez que lo acepte.