NVIDIA представила технологію Avatar Cloud Engine (ACE), яка дозволить геймерам природно розмовляти з неігровими персонажами (NPC) та отримувати відповідні відповіді. Компанія представила технологію під час своєї ключової доповіді про генеративний ШІ на виставці Computex 2023, продемонструвавши демоверсію під назвою Kairos, в якій ігровий персонаж розмовляє з NPC, на ім’я Джин в антиутопічній крамниці.
У демоверсії показано, як гравець веде розмову з Джином. “Привіт, Джине, як справи?” – запитує співрозмовник. “На жаль, не дуже добре”, – відповідає Джин. “Чому?” “Мене турбує рівень злочинності в окрузі. Останнім часом стало дуже погано. Моя крамничка потрапила під перехресний вогонь”.
Так, діалог трохи дерев’яний; здається, що ChatGPT міг би зробити кращу роботу. Проте, ідея полягає в тому, щоб показати, що ви можете просто говорити в гарнітуру, а NPC відповість у відповідному контексті, створюючи більш природну взаємодію, ніж ви зазвичай отримуєте в такій ситуації.
NVIDIA створила демонстрацію у партнерстві з Convai для просування ACE, яка може працювати як у хмарі, так і локально (на обладнанні NVIDIA, natch). Вона використовує NVIDIA NeMo для створення, налаштування та розгортання великих мовних моделей, які можуть бути налаштовані за допомогою знань та передісторій персонажів, використовуючи при цьому захисні екрани для захисту від неприйнятних розмов. Вона також використовує інструмент розпізнавання мови та перетворення мови в текст під назвою Riva, а також Omniverse Audio2Face від NVIDIA “для миттєвого створення виразної анімації обличчя ігрового персонажа відповідно до будь-якої мовної доріжки”.
Демонстрація була створена на Unreal Engine 5, щоб продемонструвати трасування променів та інші можливості графічного процесора NVIDIA. Візуальні ефекти насправді більш переконливі, ніж діалоги ШІ, хоча легко зрозуміти, що останні можна значно покращити. NVIDIА не анонсувала жодної гри, в якій буде використовуватися ця технологія, але Stalker 2: Heart of Chernobyl та Fort Solis будуть використовувати Omniverse Audio2Face.
Читайте також :
Leave a Reply