Forskere fra Adobe og Australian National University har utviklet en algoritme som konverterer todimensjonale bilder til tredimensjonale modeller på bare 5 sekunder. Dette gjennombruddet lover å revolusjonere innholdsskaping innen design og underholdning, men pass deg for mulige problemer med uskarpe teksturer og brudd på opphavsrett.
Den nye algoritmen, kalt Large Reconstruction Model (LRM), har blitt et betydelig fremskritt i den raske opprettelsen av tredimensjonale modeller basert på ett enkelt bilde. Algoritmen, trent på et stort datasett med rundt en million 3D-objekter tilgjengelig i Objaverse- og MVImgNet-databasene, demonstrerte eksepsjonell generaliseringsevne når du arbeidet med en rekke bilder for XNUMXD-innholdsskaping.
I motsetning til tidligere modeller trent på begrensede datasett med fokus på én kategori bilder, bruker LRM en transformativ arkitektur som har blitt grunnlaget for mange utviklinger innen dyp læring, med 500 millioner parametere. Dette gjør at AI-modellen kan jobbe effektivt med en rekke bildetyper, inkludert bilder fra den virkelige verden og visuelle collager laget av andre AI-tjenester som DALL-E og Stable Diffusion.
Yitzong Hong, hovedforfatter av studien, understreket at LRM er et betydelig gjennombrudd innen XNUMXD-rekonstruksjon. Algoritmen er i stand til å reprodusere detaljert geometri og komplekse teksturer, for eksempel teksturen til tre, samtidig som den opprettholder kvalitet og nøyaktighet.
Anvendelsen av LRM kan bli virkelig massiv, fra design og underholdning til spillindustrien. For designere og 3D-artister betyr dette å fremskynde prosessen med å lage modeller, noe som er spesielt viktig når man utvikler videospill og animasjon. I tillegg lover muligheten for å bruke LRM av vanlige brukere å gjøre 3D-modellering ikke bare til profesjonelle. Nå vil det være mulig å lage detaljerte modeller selv fra bilder tatt på en smarttelefon.
LRM har imidlertid sine begrensninger, for eksempel uskarphet av teksturer i skjulte områder av bildet. Det er også verdt å vurdere opphavsrettsproblemer, spesielt i sammenheng med bruk av bilder laget av andre AI-tjenester. For å demonstrere mulighetene til LRM har Adobe-forskere laget side med videodemonstrasjoner og interaktive 3D-modeller. Dette fremhever den voksende rollen til AI i dagens verden og dens potensielle innvirkning på fremtiden til den kreative industrien.
Les også: