La startup danoise Be My Eyes, qui développe des solutions pour les aveugles et les malvoyants, a dévoilé un nouvel outil de reconnaissance de formes basé sur l'intégration avec le modèle d'intelligence artificielle GPT-4 d'OpenAI. Un outil appelé "Virtual Volunteer" permet aux utilisateurs de prendre une photo de n'importe quel objet et de poser une question à ce sujet, en recevant une réponse.
Selon Mike Buckley, PDG de Be My Eyes, cette fonctionnalité pourrait permettre aux personnes malvoyantes d'avoir plus d'opportunités de vivre de manière indépendante.
Les utilisateurs de l'application pourront faire sur Smartphone une photo d'un ingrédient et obtenez des conseils sur les plats qui peuvent être préparés avec. Ils pourront également télécharger une image de carte et obtenir les directions vers le restaurant. À leur arrivée, les utilisateurs pourront prendre une photo du menu et se renseigner sur les plats disponibles. S'ils veulent aller à la salle de sport, ils peuvent trouver une machine d'exercice à l'aide de la caméra de leur smartphone.
L'application Be My Eyes était auparavant prise en charge exclusivement par des bénévoles, mais en utilisant le modèle GPT-4, l'entreprise pourra fournir encore plus d'utilisateurs et les aider à résoudre diverses tâches. Grâce à la nouvelle fonction « Virtual Volunteer », basée sur les capacités de reconnaissance d'objets, les utilisateurs aveugles et malvoyants pourront obtenir des réponses à toutes les questions liées à la perception visuelle.
Lisez aussi: