notícias

Recentemente, HiDream.ai HiDream.ai HiDream Model 2.0 fez um grande avanço no campo de vídeos Wensheng, aumentando o tempo de geração de vídeo de 15 segundos no ano passado para o nível de minutos, depois de quebrar o limite de 4 segundos em dezembro do ano passado. . Outro salto tecnológico.

A função de vídeo Wensheng do HiDream.ai HiDream.ai 2.0 foi significativamente melhorada em termos de duração, naturalidade da imagem, conteúdo e consistência dos personagens, graças à sua arquitetura DiT autodesenvolvida. Comparada com a arquitetura U-Net tradicional, a arquitetura DiT tem maior flexibilidade e pode efetivamente melhorar a qualidade da geração de imagem e vídeo. Como todos sabemos, a implementação básica da arquitetura DiT depende da tecnologia Transformer. A fim de melhorar ainda mais o desempenho desta tecnologia, HiDream.ai HiDream Large Model 2.0 adota módulos totalmente autodesenvolvidos para toda a estrutura da rede Transformer, composição de dados de treinamento e estratégias de treinamento, especialmente em termos de estratégias de treinamento aprofundadas e. melhoria.

Este modelo adota um mecanismo eficiente de atenção conjunta espaço-temporal, que não só se adapta às características do domínio espacial e temporal do vídeo, mas também resolve o problema de velocidade do mecanismo de atenção tradicional no processo de treinamento. Para suportar o treinamento de videoclipes mais longos, o HiDream.ai HiDream Large Model 2.0 pode processar videoclipes de vários minutos ou até dez minutos, possibilitando a saída direta de vídeos com minutos de duração. Ao mesmo tempo, HiDream.ai também desenvolveu um modelo de legenda para geração de descrição de vídeo para obter uma descrição detalhada e precisa do conteúdo do vídeo.

Em termos de estratégia de treinamento, HiDream.ai HiDream Large Model 2.0 usa videoclipes de diferentes durações para treinamento conjunto de dados de vídeo e imagem e ajusta dinamicamente a taxa de amostragem de vídeos de diferentes durações para completar o treinamento de longa duração. Além disso, o modelo também realiza análises químicas aprimoradas com base nos dados de feedback do usuário.hábito, para otimizar ainda mais o desempenho.

Estendido dos 15 segundos originais para o nível de minutos, o HiDream Large Model 2.0 da HiDream.ai alcançou agora um aumento significativo no tempo de geração de vídeo, atingindo o nível líder do setor. Além da melhoria significativa da duração do vídeo até o nível de minuto, outro destaque desta atualização é a variabilidade da duração e do tamanho do vídeo. Os modelos de geração de vídeo anteriores geralmente têm uma duração fixa predefinida e não podem ser selecionados pelo usuário. HiDream.ai dá o direito de escolha aos usuários. Os usuários podem especificar diretamente a duração do vídeo ou deixar o sistema julgar dinamicamente com base no conteúdo do prompt de entrada. Quando o conteúdo for complexo, o sistema gerará um vídeo mais longo; quando o conteúdo for simples, será gerado um vídeo mais curto. Neste método de ajuste dinâmico, o sistema pode atender de forma adaptativa às necessidades criativas do usuário. Ao mesmo tempo, o tamanho do vídeo também pode ser personalizado de acordo com as necessidades do usuário. Esse design flexível melhora muito a experiência do usuário.

Vale ressaltar que o HiDream Large Model 2.0 do HiDream.ai também melhorou significativamente a aparência das imagens de vídeo. Os movimentos dos objetos são mais naturais e suaves, os detalhes são renderizados com mais precisão e suporta ultra-alta definição 4K. qualidade de imagem nítida. Com esta atualização tecnológica, o HiDream.ai HiDream Large Model 2.0 está se desenvolvendo rapidamente no sentido de gerar vídeos multi-lentes de maior qualidade e acelerar em direção ao estágio L3. Entende-se que a função Vincent Video atualizada será colocada em uso em breve e os usuários poderão experimentar serviços de geração de vídeo mais ricos e de maior qualidade.

Especialistas da indústria disseram que com a melhoria contínua e atualização do grande modelo 2.0 do HiDream.ai HiDream.ai, espera-se que traga mudanças mais revolucionárias no campo da criação de conteúdo de vídeo, ajude os usuários a realizar facilmente a monetização criativa e promova. avançando em direção a um espaço de desenvolvimento mais amplo.

(Fonte: Informações Financeiras de Negócios)

Para obter informações mais interessantes, baixe o cliente "Jimu News" no mercado de aplicativos. Não reimprima sem autorização. Você pode fornecer dicas de notícias e será pago assim que aceito.