Stability AI, déjà connue pour ses innovations dans l'IA générative avec des modèles comme Stable Diffusion, enrichit sa palette de création numérique en introduisant Stable Video 3D (SV3D).
Ce modèle révolutionnaire se distingue par sa capacité à transformer des images ou du texte en courtes vidéos 3D, propulsant ainsi la génération de contenu dans une nouvelle dimension. En s'appuyant sur sa technologie préexistante de Stable Video Diffusion, SV3D permet la création et la transformation de maillages 3D multi-vues à partir d'une image unique, offrant ainsi une profondeur et une perspective renouvelées aux créateurs.
Accessibilité et Applications Pratiques
Disponible pour un usage commercial sous une licence professionnelle via le Stability Membership (à partir de 20 $ par mois), SV3D est également disponible en téléchargement pour la recherche les usages non commerciaux via la plateforme Hugging Face.
Cet outil trouvera certainement des applications pratiques et prometteuses dans la création de jeux et le commerce électronique, notamment par la production de vidéos orbitales à 360 degrés qui promettent une expérience d'achat enrichie et immersive.
De Stable Zero123 à SV3D
SV3D se présente comme une évolution majeure par rapport à Stable Zero123, un autre modèle de Stability AI axé sur la génération d'images 3D à partir d'une seule image.
La différence majeure entre ces deux technologies réside dans leur approche de la génération 3D : tandis que Stable Zero123 produit des images 3D une par une, SV3D excelle dans la création simultanée de plusieurs vues, fournissant ainsi des perspectives plus riches et cohérentes quel que soit l'angle de vue.
Avancées Technologiques Majeures
Les avancées de SV3D ne se limitent pas à la synthèse de vues multi-angles. Ce modèle pousse la génération de contenus 3D à un niveau supérieur en optimisant les champs de radiance neuronaux (NeRF) et les représentations de maillage 3D (Mesh), ce qui se traduit par des maillages de haute qualité directement issus des nouvelles vues générées.
Cette capacité à produire des vues cohérentes et de haute qualité à partir de n'importe quel angle place SV3D en tête de course dans le domaine de la création 3D assistée par IA.
Les deux versions de SV3D
SV3D se décline en deux variantes adaptées à des besoins spécifiques : SV3D_u, qui génère des vidéos orbitales sans nécessiter de conditionnement spécifique de la caméra, et SV3D_p, qui accepte à la fois des images uniques et des séquences orbitales pour la création de vidéos 3D le long de trajectoires de caméra spécifiées. Cette flexibilité ouvre de nouveaux horizons pour la création de contenu 3D dynamique et engageant.
Stability AI : Sculpteur d'Avenir
Avec Stable Video 3D, Stability AI réaffirme sa position de leader dans le domaine de l'IA générative, en proposant des outils à la pointe de l'innovation qui transforment la création de contenu numérique. En s'appuyant sur ses modèles antérieurs et en explorant de nouveaux terrains, Stability AI continue de façonner l'avenir de la génération de contenu assistée par IA, en mettant des outils puissants et accessibles entre les mains des créateurs du monde entier
Ecrit par
