Laboratorul de cercetare a inteligenței artificiale OpenAI a anunțat detalii despre cea mai recentă tehnologie care va îmbunătăți dramatic redarea 3D. OpenAI este compania din spatele generatorului de text-to-image DALĂ, care și-a îndreptat acum atenția spre traducerea indiciilor de text în nori de puncte 3D, pe care îi va numi POINT-E.
Conform document, publicat de OpenAI, POINT-E „creează modele 3D în doar 1-2 minute pe un singur GPU”, în comparație cu alte soluții existente care pot dura ore și necesită mai multe GPU-uri.
Un extras din raport detaliază locul actual al POINT-E în lumea modelării 3D: „În timp ce metoda noastră este încă sub nivelul de ultimă generație în ceea ce privește calitatea eșantionului, este cu unul sau două ordine de mărime mai rapidă, oferind un compromis practic pentru unele cazuri de utilizare.”
Funcționează prin crearea unei singure imagini sintetice cu un model de difuzie text-imagine. Se generează apoi un nor de puncte 3D care este mai ușor de sintetizat, reducând încărcarea GPU-urilor, deși nu surprinde detalii fine, ceea ce este un compromis menționat în articol.
O IA secundară a fost antrenată pentru a atenua unele dintre aceste probleme, dar lucrarea explică că „uneori poate rata părți subtile/rare ale obiectelor”, cum ar fi tulpinile de plante, creând iluzia florilor plutitoare.
OpenAI promite să antreneze inteligența artificială pe câteva milioane de modele 3D și metadatele acestora, deși domeniul său de aplicare rămâne destul de limitat până acum.
Un astfel de exemplu este redarea obiectelor reale pentru imprimarea 3D, deși pe măsură ce tehnologia se dezvoltă și se îmbunătățește, este probabil să o vedem folosită în aplicații mai complexe, cum ar fi jocuri și chiar televiziune.
Proiect open source disponibil pe GitHub.
Poți ajuta Ucraina să lupte împotriva invadatorilor ruși. Cel mai bun mod de a face acest lucru este să donați fonduri Forțelor Armate ale Ucrainei prin intermediul Salveaza viata sau prin pagina oficiala NBU.