Una nueva aplicación web permite a Alexa conversar con personas sordas

eco amazónico en la oscuridad
Greg Mombert/Tendencias digitales

Por más convenientes que hayan demostrado ser los asistentes de voz, estas herramientas impulsadas por IA se han quedado rezagadas en su incapacidad para servir a la comunidad sorda. Pero un científico informático emprendedor ha desarrollado una solución que permitirá a las personas con impedimentos auditivos experimentar los altibajos de alexa amazona, Asistente de Google y Siri junto con todos los demás. Abhishek Singh, quien saltó a la fama por primera vez cuando construyó Super Mario Bros en realidad aumentada, ha creado una aplicación web que utiliza una cámara para leer el lenguaje de signos y luego traduce esas palabras al lenguaje hablado para un Amazon Echo. Cuando el Eco pronuncia su respuesta, todo el proceso se desarrolla a la inversa, lo que da como resultado una respuesta escrita para que la lean las personas sordas o con discapacidad auditiva.

Esta aplicación va más allá de la pseudosolución proporcionada por Amazon Echo Show, que agregó una pantalla al centro de hogar inteligente para permitir que los miembros de la comunidad sorda interactúen con el hogar inteligente asistente. Sin embargo, esto todavía no permitió

alexa y su usuario realmente tengan una conversación; sin embargo, la oferta de Singh soluciona este problema.

Vídeos recomendados

"El proyecto fue un experimento mental inspirado en la observación de una tendencia entre las empresas de impulsar asistentes de voz como una forma de crear interacciones instantáneas y fluidas", dijo. Empresa rapida. “Si estos dispositivos van a convertirse en una forma central de interactuar con nuestros hogares o realizar tareas, entonces es necesario pensar en aquellos que no pueden oír ni hablar. El diseño perfecto debe ser inclusivo por naturaleza.”

Para construir el sistema, Singh entrenó a un A.I. sistema dentro de la plataforma de aprendizaje automático Tensorflow, firmando palabras a través de su cámara web hasta la saciedad para "enseñar" el lenguaje de señas del sistema. Luego añadió las capacidades de conversión de texto a voz de Google para traducir el lenguaje de señas a palabras habladas.

Si bien la solución de Singh es elegante, el codificador aún espera que Amazon finalmente reconozca el lenguaje de señas por sí solo. “Ahí es donde espero que esto se dirija. Y si este proyecto conduce a un pequeño impulso en esa dirección, entonces la misión se cumplió”, afirmó. "En un mundo ideal, habría construido esto directamente en el Show, pero los dispositivos aún no son tan pirateables, no pude encontrar una manera de hacerlo".

Recomendaciones de los editores

  • ¿Qué es Amazon Alexa y qué puede hacer?
  • Alexa vs. HomeKit: ¿qué plataforma de hogar inteligente es mejor?
  • Amazon Alexa tiene como objetivo optimizar la experiencia de carga de vehículos eléctricos
  • Los 8 mejores comandos navideños de Alexa
  • Las nuevas cámaras Ring obtienen radar, un nuevo diseño y ahora pueden enviar el robot de Amazon Astro

Mejora tu estilo de vidaDigital Trends ayuda a los lectores a mantenerse al tanto del vertiginoso mundo de la tecnología con las últimas noticias, reseñas divertidas de productos, editoriales interesantes y adelantos únicos.