Kommer du ihåg de "levande" målningarna från Harry Potter-filmerna? Så tack vare tekniken och ansträngningarna från ingenjörer från University of Washington State blev fiktionen verklighet. De skapade ett system baserat på AI – Foto Wake-Up, som kan ge vilken 2D-bild som helst liv.
Från filmer om häxkonst till verkliga livet
Systemet använder ett program som heter SMPL, maskinseende och djupinlärning för att klippa ut en 2D-bild, rita ett 3D-skelett över den och animera den.
De första resultaten av Photo Wake-Up-arbetet är imponerande, objekten är nästan helt verklighetstrogna, det finns bara små fel.
Läs också: PlayStation patenterade tekniken för "automatiska" remasters
Enligt utvecklarna: "det nya systemet använder en deformationsalgoritm som justerar onaturliga former av ett 3D-objekt. Dessutom kan Photo Wake-Up bestämma riktningen för motivets blick och positionen för hans huvud. Utöver detta har ett användargränssnitt utvecklats som låter dig korrigera befintliga felaktigheter manuellt.”
Läs också: Vivo tillkännagav lanseringen av ny fingeravtrycksskanningsteknik och DSP-acceleration
De skapade 3D-objekten kan ses på video eller användas i förstärkt och virtuell verklighet. Trots alla fördelar som anges ovan är systemet fortfarande långt ifrån idealiskt. Till exempel vet hon inte hur man applicerar skuggor och reflektioner, och förstår inte heller alla poser för objektet.
"Vi tror att systemet vi har skapat inte bara kommer att fungera som underhållning, utan också kommer att tillåta att skapa en 3D-avatar från en 2D-bild och kommer att vara en drivkraft för utvecklingen av denna riktning." - informera skaparna av Photo Wake-Up.