L'application Be my eyes (Sois mes yeux) va bénéficier de chatGPT-4 !

Pour tous les malvoyants, cette nouvelle va changer leurs vies.

Bemyeyes est une application Android ou iOS qui existe depuis 2015. Elle permet aux malvoyants de bénéficier de l’assistance en direct de voyants bénévoles.

Avec l'arrivée de ChatGPT 4 et notamment la possibilité de cette dernière version de traiter non seulement le texte, mais désormais les images et même le son, les malvoyants vont pouvoir mieux faire face à beaucoup de leurs problèmes avec l'aide de l'intelligence artificielle dernier cri.

S'ils n'y arrivent toujours pas, ils pourront bien sûr faire appel, dans la même application, aux volontaires voyants.

La présentation de cette importante nouveauté, traduite en français à partir du site bemyeyes.com.

Présentation de notre outil de bénévolat virtuel pour les personnes aveugles ou malvoyantes, optimisé par OpenAI's GPT-4

Nous sommes ravis d'annoncer Be My Eyes Virtual Volunteer™, le tout premier assistant visuel numérique alimenté par le nouveau modèle de langage GPT-4 d'OpenAI.

Dès aujourd'hui, vous pouvez vous inscrire sur la liste d'attente dans l'application Be My Eyes.

Pourquoi maintenant
Notre mission est de rendre le monde plus accessible aux personnes aveugles ou malvoyantes. Depuis notre création en 2015, Be My Eyes s'est efforcé de connecter nos 6,3 millions de bénévoles aux utilisateurs pour les aider dans leurs tâches quotidiennes. Notre nouvel outil [Virtual Volunteer]b, actuellement en phase de test bêta, nous poussera plus loin vers la réalisation de notre objectif d'améliorer l'accessibilité, la convivialité et l'accès à l'information à l'échelle mondiale, et nous aligne sur les principes énoncés d'OpenAI sur le développement d'une IA sûre et responsable.

Cette technologie sera transformatrice en fournissant aux personnes aveugles ou malvoyantes de nouvelles ressources puissantes pour mieux naviguer dans les environnements physiques, répondre aux besoins quotidiens et gagner en indépendance.


Aperçu de l'interface virtuelle des bénévoles

Comment ça fonctionne

La fonctionnalité Virtual Volunteer (volontaire virtuel) de Be My Eyes sera intégrée à l'application existante et alimentée par le nouveau modèle de langage GPT-4 d'OpenAI, qui contient un nouveau générateur dynamique d'images en textes. Les utilisateurs peuvent envoyer des images via l'application à un volontaire virtuel alimenté par l'IA, qui répondra à toute question concernant cette image et fournira une assistance visuelle instantanée pour une grande variété de tâches.

Ce qui distingue l'outil Virtual Volunteer des autres technologies image-texte disponibles aujourd'hui, c'est le contexte, avec un niveau de compréhension et une capacité de conversation plus profonde encore jamais vue dans le domaine des assistants numériques.

Par exemple, si un utilisateur envoie une photo de l'intérieur de son réfrigérateur, le Volontaire Virtuel pourra non seulement identifier correctement ce qu'il contient, mais encore extrapoler et analyser ce qui peut être préparé avec ces ingrédients. L'outil pourra également proposer un certain nombre de recettes pour ces ingrédients et envoyer un guide étape par étape sur la façon de les fabriquer.

Si et quand l'outil est incapable de répondre à une question, il offrira automatiquement aux utilisateurs la possibilité d'être mis en contact via l'application avec un volontaire voyant pour obtenir de l'aide - notre expérience de volontariat ne va nulle part.

Cette nouvelle fonctionnalité promet non seulement de mieux soutenir la communauté aveugle et malvoyante via notre application, mais nous pensons aussi qu'elle offrira aux entreprises un moyen de mieux servir leurs clients en donnant la priorité à l'accessibilité. Nous prévoyons de commencer le test bêta avec nos entreprises clientes dans les semaines à venir et de le rendre largement disponible plus tard cette année dans le cadre de notre offre d'aide spécialisée.

Disponibilité
Cette fonctionnalité est actuellement en version bêta fermée et est en cours de test pour recueillir les commentaires d'un petit sous-ensemble de nos utilisateurs. Nous élargirons le groupe de bêta-testeurs durant les prochaines semaines et nous espérons rendre le Volontaire Virtuel largement disponible dans les mois à venir. Comme notre service bénévole existant, cet outil sera gratuit pour tous les membres de la communauté aveugles et malvoyants utilisant l'application Be My Eyes.

Et, après
Nous allons attentivement écouter notre communauté et travailler continuellement pour améliorer la technologie et l'expérience. Il est extrêmement important pour nous que notre communauté joue un rôle majeur en nous aidant à développer davantage cet outil en fournissant des commentaires critiques et précieux qui influenceront l'avenir de cette technologie et ce qu'elle est capable de fournir.

Du développement de cas d'utilisations supplémentaires à la mise en forme de l'interface, nous voulons que notre communauté façonne cette technologie pour mieux répondre à ses besoins. Notre équipe de Be My Eyes est extrêmement reconnaissante envers nos utilisateurs pour leur contribution, et nous continuerons à accueillir les commentaires au fur et à mesure que nous peaufinerons ce nouvel outil. Nous nous engageons à nous déplacer de manière réfléchie et à écouter attentivement, tout en donnant la priorité à la sécurité avant tout.

À terme, nous espérons appliquer cette technologie pour fournir aux utilisateurs des outils et des capacités puissants pour enrichir leur expérience d'assistant virtuel de manière étonnante et complexe que nous n'aurions jamais cru possible.

Imaginez naviguer dans un système ferroviaire dans un endroit inconnu, voyager dans un pays étranger dont vous ne parlez pas la langue, naviguer sur des sites Web et des plateformes de médias sociaux, faire des achats en ligne et une foule d'autres façons dont nous savons que notre communauté nous aidera à identifier - les possibilités sont illimitées, et nous ne faisons que commencer.

Si vous ou une personne que vous connaissez êtes aveugles et souhaitez être mis sur une liste d'attente pour tester l'outil Virtual Volunteer, vous pouvez vous inscrire ici sur la liste d'attente.

Apprenez-en plus sur bemyeyes.com et rejoignez-nous sur LinkedIn , Twitter , Facebook , Instagram et TikTok.


L'adresse de Be my Eyes

Le lien original de ce texte

La vidéo de 2017 sur l'application

La dernière video en date

Les news sur l'appli pour les non-anglophones (cherchez Français)