De nos jours, il est difficile de surprendre quelqu'un avec un assistant vocal. Il y a Alexa mobile, Google Assistant et Siri, il y a Cortana sur Windows. Mais le système d'exploitation Linux est resté longtemps sans une telle application. Mais maintenant, il est apparu - après 3 ans de développement, il était libéré la version finale de l'assistant vocal Dragonfire 1.0.
Ce qui est connu
Le programme est écrit en Python et distribué sous licence MIT. Il nécessite des distributions basées sur le système d'exploitation Ubuntu, notamment KDE Neon et Elementary OS. Il existe également une version mobile pour Android.
La reconnaissance des commandes vocales est effectuée par le système de reconnaissance vocale Mozilla DeepSpeech. Il est basé sur la plateforme d'apprentissage automatique TensorFlow. La synthèse est réalisée aux frais du Festival. L'interface question/réponse est basée sur la bibliothèque de reconnaissance de texte en langage naturel spaCy et sur les données de Wikipedia. Les réponses sont formées sur la base de dialogues de films (Cornell Movie-Dialogs Corpus).
Une silhouette translucide peut être affichée à l'écran pour visualiser Dragonfire. Il montre le fonctionnement du système. Les commandes vocales vous permettent de lancer des applications, de calculer des expressions mathématiques et de poser des questions arbitraires. Vous pouvez utiliser votre voix pour effectuer une recherche dans la liste des commandes intégrées.
Le système est capable de fonctionner en mode serveur, fournissant une API RESTful pour créer des chatbots de dialogue. La livraison a déjà une version prête du bot pour Twitter. La configuration système requise pour Dragonfire comprend une carte vidéo avec prise en charge de CUDA et 2 Go de RAM libre. La reconnaissance vocale est également prise en charge à l'aide de l'API Google Speech plutôt que du moteur intégré. Cela économisera les ressources système.
Pourquoi est-ce nécessaire ?
Initialement, l'assistant Dragonfire est en cours de développement dans le cadre du projet de casque de moto à réalité augmentée Dragon Armor. Cependant, l'utilisation de la technologie de commande vocale est également intéressante sur les PC ordinaires. Oui, c'est un moyen moins familier que la souris, mais qui sait, peut-être qu'à l'avenir, Dragonfire et similaires deviendront des "résidents" obligatoires des systèmes d'exploitation.
Ainsi, les gens fantastiques avaient raison, il sera bientôt possible de parler à un assistant virtuel comme une personne normale.
Source: GitHub