Des chercheurs d'Adobe et de l'Université nationale australienne ont développé un algorithme qui convertit les images bidimensionnelles en modèles tridimensionnels en seulement 5 secondes. Cette avancée promet de révolutionner la création de contenu dans le domaine du design et du divertissement, mais méfiez-vous des problèmes possibles liés aux textures floues et à la violation des droits d'auteur.
Le nouvel algorithme, appelé Large Reconstruction Model (LRM), constitue une avancée significative dans la création rapide de modèles tridimensionnels basés sur une seule image. L'algorithme, formé sur un vaste ensemble de données d'environ un million d'objets 3D disponibles dans les bases de données Objaverse et MVImgNet, a démontré une capacité de généralisation exceptionnelle lorsqu'il travaillait avec une variété d'images pour la création de contenu XNUMXD.
Contrairement aux modèles précédents formés sur des ensembles de données limités et axés sur une catégorie d'images, LRM utilise une architecture transformatrice qui est devenue la base de nombreux développements en matière d'apprentissage profond, avec 500 millions de paramètres. Cela permet au modèle d'IA de fonctionner efficacement avec une variété de types d'images, y compris des photos du monde réel et des collages visuels créés par d'autres services d'IA tels que DALL-E et Stable Diffusion.
Yitzong Hong, auteur principal de l'étude, a souligné que le LRM constitue une avancée significative dans le domaine de la reconstruction XNUMXD. L'algorithme est capable de reproduire une géométrie détaillée et des textures complexes, par exemple la texture du bois, tout en conservant la qualité et la précision.
L'application du LRM peut devenir véritablement massive, du design et du divertissement à l'industrie du jeu. Pour les concepteurs et les artistes 3D, cela signifie accélérer le processus de création de modèles, ce qui est particulièrement important lors du développement de jeux vidéo et d'animation. De plus, la possibilité d'utiliser LRM par les utilisateurs ordinaires promet de faire de la modélisation 3D l'apanage des professionnels. Il sera désormais possible de créer des modèles détaillés même à partir de photos prises sur un smartphone.
Cependant, LRM a ses limites, comme le flou des textures dans les zones cachées de l'image. Il convient également de considérer les questions de droits d’auteur, notamment dans le contexte de l’utilisation d’images créées par d’autres services d’IA. Pour démontrer les capacités de LRM, les chercheurs d'Adobe ont créé page avec des démonstrations vidéo et des modèles 3D interactifs. Cela met en évidence le rôle croissant de l’IA dans le monde d’aujourd’hui et son impact potentiel sur l’avenir des industries créatives.
Lisez aussi: