nouvelles

Cela ne prend que 0,5 seconde ! Le nouveau modèle Stability AI génère des images 3D ultra-rapides

2024-08-03

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Auteur de cet article : Li Dan

Source : IA dure

La start-up star de l'intelligence artificielle générative (IA), Stability AI, a publié en août son dernier modèle 3D révolutionnaire, Stable Fast 3D, qui augmente considérablement la vitesse de génération d'images 3D à partir d'une seule image.


Stability AI a introduit que Stable Fast 3D peut convertir une seule image d'entrée en un actif 3D détaillé en seulement 0,5 seconde. On pense que ce modèle innovant établit une nouvelle référence en matière de vitesse et de qualité dans le domaine de la reconstruction 3D. Il génère rapidement des ressources 3D complètes, y compris des réseaux UV divisés, des paramètres de matériaux et des couleurs d'albédo pour une réduction de l'éclairage, avec un remaillage quad ou triangle sélectionnable par l'utilisateur n'ajoutant que 100 à 200 millisecondes au temps de traitement.

L’avènement de Stable Fast 3D représente un grand pas en avant pour Stability AI en réduisant le temps de traitement des modèles d’IA.

En mars de cette année, Stability AI a publié le modèle 3D Stable Video 3D (SV3D), qui est amélioré sur la base de la diffusion vidéo stable et peut générer le modèle 3D correspondant avec une seule image. Il convient aux nouvelles tâches de synthèse de perspective et à la 3D. génération. Alors que SV3D prend jusqu'à 10 minutes pour générer des ressources 3D, Stable Fast 3D accomplit la même tâche en seulement 0,5 seconde, augmentant ainsi la vitesse de 1 200 fois.

Lorsque Stability AI a publié Stale Fast 3D, il a été spécifiquement mentionné que le modèle surpassait la concurrence dans plusieurs domaines clés, dont l'un est le suivant : sur un GPU doté de 7 Go de mémoire graphique VRAM, il ne faut que 0,5 seconde pour générer des ressources 3D à chaque fois, tandis que Stability AI Cela prend presque une seconde sur l'API. De plus, le modèle présente un réseau de séparation UV de haute qualité et des paramètres de matériaux qui réduisent l'éclairage intriqué dans les textures, ainsi que la possibilité de générer des paramètres de matériaux supplémentaires et des cartes normales.



Stability AI a déclaré que Stable Fast 3D est basé sur le modèle TripoSR développé par la société et Tripo AI, qui peut considérablement améliorer l'architecture et améliorer les fonctions. Le modèle convient aux développeurs de jeux et de réalité virtuelle (VR), ainsi qu'aux professionnels du commerce de détail, de l'architecture, du design et d'autres secteurs à forte intensité graphique. Il existe de multiples cas d’utilisation dans la production de jeux et de films :

  • Utilisez ce modèle pour permettre une inférence rapide pendant la pré-production lorsque l'expérimentation est essentielle.
  • Actifs statiques du jeu (objets d'arrière-plan, fouillis, meubles)
  • Modèle 3D de commerce électronique
  • Création rapide de modèles pour l'affichage augmenté (AR)/VR.

Actuellement, Stable Fast 3D est disponible via le chatbot Stable Assistant et l'API Stability AI de Stability AI. Les utilisateurs peuvent utiliser le modèle sur la communauté open source AI Hugging Face, et Stability AI est publié sous la licence communautaire Stability AI, qui est gratuite pour la recherche, l'utilisation non commerciale et commerciale.

Après que Stability AI a officiellement annoncé le lancement de Stable Fast 3D, les internautes sur les réseaux sociaux ont rapidement répondu à des questions sur la clarté du réseau UV généré par le modèle et sur le nombre de polygones qu'il contenait. Certains internautes ont déclaré avoir aimé l'animation jointe par Stability AI lors de la sortie du modèle. Elle montrait la machine crachant des modèles d'images généraux d'IA et les jetant directement à la poubelle. Certains internautes ont demandé si les résultats 3D générés pouvaient être imprimés.




Certains commentaires affirment qu'actuellement, la création de contenu dans le monde 3D constitue un goulot d'étranglement. Nous ne voulons pas payer quelqu'un pour fabriquer le métaverse à la main. La génération automatique d'actifs devrait être la valeur par défaut, tout comme dans le monde réel. Le nouveau modèle de Stability AI constitue un grand pas dans la bonne direction.