La technologie sous-jacente ChatGPT, peut faire bien plus que simplement parler. Oui, un chercheur en IA dans l'entreprise NVIDIA Lynsey Fan a travaillé avec l'équipe sur l'utilisation du puissant modèle de langage GPT-4 (c'est le « cerveau » de ChatGPT et de nombreuses autres applications et services) dans le jeu Minecraft.
Équipe NVIDIA a créé un robot Minecraft appelé Voyager qui utilise GPT-4 pour résoudre les problèmes du jeu. Le modèle de langage génère des tâches qui aident l'agent à explorer le jeu et du code qui améliore les compétences du robot dans le jeu au fil du temps. Voyager ne joue pas comme un humain, mais peut lire l'état du jeu directement, via une API. Par exemple, il peut voir une canne à pêche dans son inventaire et une rivière à proximité et l'utiliser GPT-4, pour suggérer un objectif à pêcher pour l'expérience. Il utilisera ensuite cet objectif pour que GPT-4 génère le code nécessaire au personnage pour atteindre cet objectif.
La partie la plus innovante du projet est le code généré par GPT-4 pour ajouter un comportement à Voyager. Si le code initialement suggéré ne fonctionne pas parfaitement, le bot essaiera de l'améliorer et utilisera les messages d'erreur, les commentaires du jeu et la description du code généré par GPT-4 pour ce faire.
Au fil du temps, Voyager construit une bibliothèque de code et apprend à créer des choses plus complexes et à explorer d'autres parties du jeu. Un graphique créé par des chercheurs montre à quel point il est plus efficace que les mods Minecraft. Voyager récupère trois fois plus d'objets, explore plus de deux fois la zone et crée des outils 15 fois plus rapidement que les autres agents IA. Lynsey Fan dit que cette approche peut être affinée à l'avenir.
Alors que les chatbots comme ChatGPT étonnent le monde avec leur éloquence, même lors de l'écriture de jeu (ou surtout lors de l'écriture de jeu), Voyager démontre l'énorme potentiel des modèles de langage pour effectuer des actions utiles sur les ordinateurs. L'utilisation de modèles linguistiques de cette manière pourrait automatiser les tâches de bureau courantes et potentiellement ajouter des technologies rentables.
Le processus que Voyager utilise avec GPT-4 pour comprendre comment faire les choses dans le Minecraft, peut être adapté pour un assistant logiciel travaillant sur la façon d'automatiser des tâches via un système d'exploitation sur un PC ou un téléphone. Nouvellement Microsoft annoncé Copilote Windows 11 – une fonctionnalité du système d'exploitation qui utilisera l'apprentissage automatique et les API pour automatiser certaines tâches. Expérimenter une telle technologie dans un jeu comme Minecraft, où un code imparfait peut faire relativement peu de dégâts, pourrait être une bonne idée.
Intéressant aussi :
Les jeux vidéo ont longtemps été un banc d'essai pour les algorithmes d'intelligence artificielle. Exemple, AlphaGo, le programme d'apprentissage automatique qui a maîtrisé le jeu de société très sophistiqué de Go en 2016, s'est essayé aux jeux vidéo Atari simples. AlphaGo a utilisé une technique appelée apprentissage par renforcement, qui apprend à l'algorithme à jouer au jeu en lui donnant des commentaires positifs et négatifs, comme le score du jeu.
Cette méthode est plus difficile à contrôler l'agent dans les jeux ouverts où il n'y a pas de score ou d'ensemble d'objectifs, et où les actions du joueur ne peuvent porter leurs fruits qu'après un certain temps. Cependant, Minecraft est un excellent terrain d'essai pour les technologies d'IA.
Lisez aussi: