Une nouvelle application Web permet à Alexa d'avoir une conversation avec les sourds

Amazon fait écho dans le noir
Greg Mombert/Tendances numériques

Aussi pratiques que soient les assistants vocaux, ces outils basés sur l’IA sont à la traîne dans leur incapacité à servir la communauté sourde. Mais un informaticien entreprenant a développé une solution qui permettra aux personnes malentendantes de ressentir les hauts et les bas de l'audio. Amazon Alexa, Google Assistant et Siri avec tout le monde. Abhishek Singh, qui s'est fait connaître pour la première fois en construisant super Mario Bros en réalité augmentée, a créé une application Web qui utilise une caméra pour lire la langue des signes, puis traduit ces mots en langue parlée pour un Amazon Echo. Lorsque l'Echo prononce sa réponse, l'ensemble du processus se déroule à l'envers, ce qui donne lieu à une réponse dactylographiée que les personnes malentendantes ou sourdes peuvent lire.

Cette application va au-delà de la pseudo-solution proposée par Amazon Echo Show, qui ajoutait un écran au hub de maison intelligente afin de permettre aux membres de la communauté sourde d'interagir avec la maison intelligente assistant. Cependant, cela ne permettait toujours pas

Alexa et son utilisateur d’avoir véritablement une conversation – l’offre de Singh corrige cependant ce problème.

Vidéos recommandées

"Le projet était une expérience de pensée inspirée par l'observation d'une tendance parmi les entreprises à promouvoir les assistants vocaux comme moyen de créer des interactions instantanées et transparentes", a-t-il déclaré. Entreprise rapide. « Si ces appareils doivent devenir un moyen central d’interagir avec notre maison ou d’effectuer des tâches, il faut alors penser à ceux qui ne peuvent ni entendre ni parler. Une conception transparente doit être caractère inclusif.”

Lors de la construction du système, Singh a formé un IA. système au sein de la plateforme d'apprentissage automatique Tensorflow, signant des mots via sa webcam ad nauseam afin « d'enseigner » la langue des signes du système. Il a ensuite ajouté les capacités de synthèse vocale de Google afin de traduire la langue des signes en mots parlés.

Même si la solution de Singh est élégante, le codeur espère toujours qu’Amazon finira par reconnaître lui-même la langue des signes. «C’est là que j’espère que cela mène. Et si ce projet conduit à une légère avancée dans cette direction, alors mission accomplie », a-t-il déclaré. "Dans un monde idéal, j'aurais construit cela directement sur le Show, mais les appareils ne sont pas encore piratables, [I] n'ai pas réussi à trouver un moyen de le faire."

Recommandations des rédacteurs

  • Qu'est-ce qu'Amazon Alexa et que peut-il faire?
  • Alexa contre HomeKit: quelle plateforme de maison intelligente est la meilleure?
  • Amazon Alexa vise à rationaliser l'expérience de recharge des véhicules électriques
  • Les 8 meilleures commandes de vacances Alexa
  • Les nouvelles caméras Ring disposent d'un radar, d'un nouveau design et peuvent désormais envoyer le robot d'Amazon Astro

Améliorez votre style de vieDigital Trends aide les lecteurs à garder un œil sur le monde en évolution rapide de la technologie avec toutes les dernières nouvelles, des critiques de produits amusantes, des éditoriaux perspicaces et des aperçus uniques.