Disney-onderzoekers hebben een nieuw neuraal netwerk gecreëerd dat de visuele leeftijd van acteurs op televisie of in films kan veranderen. Met de technologie kunnen tv- of filmproducenten acteurs er ouder of jonger uit laten zien in een geautomatiseerd proces dat minder kostbaar en tijdrovend is dan eerdere methoden.
Wanneer special effects-professionals in een video- of filmproductie een acteur er ouder of jonger uit willen laten zien (een methode die Disney "verjonging" noemt), gebruiken ze traditioneel 3D-scanning en 3D-modellering of 2D beeld-voor-beeld digitale gezichtsherkenning. acteur retoucheren met behulp van Photoshop-achtige tools. Dit proces kan weken of langer duren, afhankelijk van de lengte van de taak.
De nieuwe AI-technologie van Disney, het Face Re-aging Network (FRAN) genaamd, automatiseert het proces daarentegen. Disney noemt het "de eerste praktische, volautomatische en productieklare methode voor het reconstrueren van gezichten uit videobeelden."
Om FRAN te maken, genereerden Disney-onderzoekers willekeurig duizenden voorbeelden van synthetisch verouderde gezichten tussen de 18 en 85 jaar met behulp van StyleGAN2. Gewapend met deze trainingsgegevens onderzocht FRAN de algemene principes van hoe het uiterlijk van een persoon verandert met de leeftijd. Nu de training is voltooid, kan ze deze verouderingsprincipes frame voor frame toepassen op een echte acteur in beweging.
"Ons netwerk wordt onder supervisie getraind op een groot aantal paren gezichtsafbeeldingen waarop dezelfde synthetische en fotorealistische persoon te zien is, gelabeld met de bijbehorende bron- en doelleeftijd", schrijven de onderzoekers in het bijbehorende wetenschappelijke artikel. – Door de trainingsgegevens synthetisch te genereren, omzeilden ze de "schijnbaar onmogelijke taak" om afbeeldingen te verzamelen die "verschillende identiteiten, leeftijden en etniciteiten vanuit verschillende perspectieven" afbeelden.
Het resultaat is wat Disney een "productieklare" oplossing noemt, wat betekent dat het een product creëert dat goed genoeg is om in een echte film of tv-show te worden gebruikt. Dit is misschien wel de eerste kunstmatige intelligentie (AI)-oplossing in zijn soort die de leeftijd van een acteur in een video dynamisch kan veranderen, ondanks verschillende gezichtsuitdrukkingen, lichtomstandigheden en gezichtspunten. De onderzoekers ontwikkelden ook een gebruiksvriendelijke interface voor FRAN waarmee artiesten de tool gemakkelijk kunnen gebruiken in een productieomgeving.
Gezien Disney's geschiedenis van het gebruik van computerondersteunde acteurs in de Star Wars-films en tv-shows, inclusief degenen die zijn verjongd met CGI, zou het ons niet verbazen als FRAN-achtige technologie op grote schaal wordt gebruikt in toekomstige Disney-films, hoewel er geen plannen zijn. aangekondigd.
U kunt Oekraïne helpen vechten tegen de Russische indringers, de beste manier om dit te doen is door geld te doneren aan de strijdkrachten van Oekraïne via Red het leven of via de officiële pagina NBU.
Ook interessant: