notícias

Leva apenas 0,5 segundos! Novo modelo de Stability AI gera imagens 3D ultrarrápidas

2024-08-03

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Autor deste artigo: Li Dan

Fonte: IA difícil

A startup estrela de inteligência artificial generativa (IA), Stability AI, lançou seu mais recente modelo 3D inovador, Stable Fast 3D, em agosto, o que aumenta muito a velocidade de geração de imagens 3D a partir de uma única imagem.


Stability AI introduziu que o Stable Fast 3D pode converter uma única imagem de entrada em um ativo 3D detalhado em apenas 0,5 segundos. Acredita-se que este modelo inovador estabelece um novo padrão de velocidade e qualidade no campo da reconstrução 3D. Ele gera rapidamente ativos 3D completos, incluindo redes de divisão UV, parâmetros de materiais e cores de albedo para cozimento com iluminação reduzida, com remesh quadrangular ou triangular selecionável pelo usuário, adicionando apenas 100 a 200 milissegundos ao tempo de processamento.

O advento do Stable Fast 3D representa um grande salto para a Stability AI na redução do tempo de processamento do modelo de IA.

Em março deste ano, a Stability AI lançou o modelo 3D Stable Video 3D (SV3D), que é aprimorado com base no Stable Video Diffusion e pode gerar o modelo 3D correspondente com apenas uma imagem. É adequado para novas tarefas de síntese de perspectiva e 3D. geração. Enquanto o SV3D leva até 10 minutos para gerar ativos 3D, o Stable Fast 3D conclui a mesma tarefa em apenas 0,5 segundos, aumentando a velocidade em 1.200 vezes.

Quando a Stability AI lançou o Stale Fast 3D, foi mencionado especificamente que o modelo superava a concorrência em várias áreas principais, uma das quais é: em uma GPU com 7 GB de memória gráfica VRAM, leva apenas 0,5 segundos para gerar ativos 3D de cada vez, enquanto Stability AI leva quase um segundo na API. Além disso, o modelo apresenta uma rede de divisão UV de alta qualidade e parâmetros de materiais que reduzem a iluminação emaranhada nas texturas, bem como a capacidade de gerar parâmetros de materiais adicionais e mapas normais.



Stability AI disse que Stable Fast 3D é baseado no modelo TripoSR desenvolvido pela empresa e Tripo AI, que pode melhorar significativamente a arquitetura e aprimorar funções. O modelo é adequado para desenvolvedores de jogos e realidade virtual (VR), bem como para profissionais de varejo, arquitetura, design e outros setores com uso intensivo de gráficos. Existem vários casos de uso em jogos e produção de filmes:

  • Use este modelo para permitir inferência rápida durante a pré-produção quando a experimentação for fundamental.
  • Ativos estáticos do jogo (objetos de fundo, desordem, móveis)
  • Modelo 3D de comércio eletrônico
  • Criação rápida de modelos para exibição aumentada (AR)/VR.

Atualmente, Stable Fast 3D está disponível por meio do chatbot Stable Assistant e Stability AI API do Stability AI. Os usuários podem usar o modelo na comunidade de código aberto de IA Hugging Face, e o Stability AI é lançado sob a Stability AI Community License, que é gratuita para pesquisa, uso não comercial e comercial.

Depois que a Stability AI anunciou oficialmente o lançamento do Stable Fast 3D, os internautas nas redes sociais responderam rapidamente. Alguns internautas perguntaram quão clara era a rede UV gerada pelo modelo e quantos polígonos ela tinha. Alguns internautas disseram que gostaram da animação anexada pela Stability AI quando lançou o modelo. Ela mostrava a máquina cuspindo modelos gerais de imagens de IA e jogando-os diretamente no lixo. Alguns internautas perguntaram se os resultados 3D gerados poderiam ser impressos.




Alguns comentários dizem que atualmente a criação de conteúdo no mundo 3D é um gargalo. Não queremos pagar alguém para criar o Metaverso à mão. A geração automática de ativos deve ser o padrão, assim como no mundo real. O novo modelo da Stability AI é um grande passo na direção certa.