Generativní AI NVIDIA umožňuje hráčům komunikovat s NPC

NVIDIA představil technologii Avatar Cloud Engine (ACE), která hráčům umožní přirozeně mluvit s nehráčskými postavami (NPC) a přijímat odpovídající odpovědi. Společnost tuto technologii odhalila během své generativní AI keynote na Computexu 2023 a představila demo nazvané Kairos, ve kterém herní postava mluví s NPC jménem Jean v dystopickém obchodě.

Demo ukazuje, že hráč konverzuje s Jinem. "Ahoj Gene, jak se máš?" - ptá se mluvčí. "Bohužel ne moc dobře," odpovídá Jean. "Proč?" „Znepokojuje mě míra kriminality v okrese. Poslední dobou je to hodně špatné. Můj obchod byl chycen křížovou palbou."

Ano, dialog je trochu dřevěný; zdá se, že ChatGPT by mohl odvést lepší práci. Cílem však je ukázat, že můžete jednoduše mluvit do náhlavní soupravy a NPC bude reagovat v kontextu, čímž vznikne přirozenější interakce, než jaké byste v takové situaci normálně získali.

NVIDIA vytvořili demo ve spolupráci s Convai na propagaci ACE, které lze provozovat v cloudu i lokálně (na hardwaru NVIDIA, natch). Používá NVIDIA NeMo k vytváření, přizpůsobování a nasazování velkých řečových modelů, které lze upravit podle tradice a příběhů postav, a zároveň používat štíty k ochraně před nežádoucími konverzacemi. Používá také nástroj pro rozpoznávání řeči a převod řeči na text s názvem Riva, stejně jako Omniverse Audio2Face od NVIDIA „okamžitě vytvořit expresivní animaci obličeje herní postavy podle jakékoli řečové stopy“.

Демонстрація була створена на Unreal Engine 5, щоб продемонструвати трасування променів та інші можливості графічного процесора NVIDIA. Vizuální prvky jsou ve skutečnosti přesvědčivější než dialog AI, i když je snadné vidět, že druhý by mohl být výrazně vylepšen. NVIDIA neoznámila žádné hry, které budou používat tuto technologii, ale Stalker 2: Heart of Chernobyl a Fort Solis budou používat Omniverse Audio2Face.

Přečtěte si také:

• NVIDIA představila superpočítač DGX GH200 pro vývoj AI
• Na síti se objevil únik specifikací Nvidia RTX 4060 a 4060 Ti