Um novo aplicativo da web permite que Alexa converse com surdos

Amazon eco no escuro
Greg Mombert/Tendências Digitais

Por mais convenientes que os assistentes de voz tenham provado ser, essas ferramentas alimentadas por IA ficaram para trás em sua incapacidade de servir a comunidade surda. Mas um cientista da computação empreendedor desenvolveu uma solução que permitirá que pessoas com problemas auditivos experimentem os altos e baixos do som. AmazonAlexa, Google Assistant e Siri junto com todos os outros. Abhishek Singh, que ganhou destaque pela primeira vez quando construiu Super Mario Bros em realidade aumentada, criou um aplicativo web que usa uma câmera para ler a linguagem de sinais e depois traduz essas palavras para a linguagem falada para um Amazon Echo. Quando o Echo fala sua resposta, todo o processo ocorre ao contrário, resultando em uma resposta digitada para pessoas com deficiência auditiva ou surdas lerem.

Este aplicativo vai além da pseudo-solução fornecida pelo Amazon Echo Show, que adicionou uma tela ao hub de casa inteligente para permitir que membros da comunidade surda interajam com a casa inteligente assistente. Contudo, isso ainda não permitiu

Alexa e seu usuário realmente tenham uma conversa – a oferta de Singh, no entanto, corrige isso.

Vídeos recomendados

“O projeto foi um experimento mental inspirado na observação de uma tendência entre as empresas de promover assistentes baseados em voz como uma forma de criar interações instantâneas e contínuas”, disse ele. Empresa rápida. “Para que estes dispositivos se tornem uma forma central de interagirmos com as nossas casas ou realizarmos tarefas, então é necessário pensar um pouco naqueles que não conseguem ouvir ou falar. O design perfeito precisa ser natureza inclusiva.”

Ao construir o sistema, Singh treinou um I.A. sistema dentro da plataforma de aprendizado de máquina Tensorflow, assinando palavras através de sua webcam ad nauseam para “ensinar” a linguagem de sinais do sistema. Ele então adicionou os recursos de conversão de texto em fala do Google para traduzir a linguagem de sinais em palavras faladas.

Embora a solução de Singh seja elegante, o programador ainda espera que a Amazon acabe reconhecendo a linguagem de sinais por conta própria. “É aí que espero que isso vá. E se este projeto levar a um pequeno impulso nessa direção, então a missão está cumprida”, disse ele. “Em um mundo ideal, eu teria construído isso diretamente no programa, mas os dispositivos ainda não são tão hackeáveis, [eu] não consegui encontrar uma maneira de fazer isso.”

Recomendações dos Editores

  • O que é Amazon Alexa e o que ele pode fazer?
  • Alexa vs. HomeKit: qual plataforma de casa inteligente é a melhor?
  • Amazon Alexa visa agilizar a experiência de carregamento de EV
  • Os 8 melhores comandos de férias do Alexa
  • Novas câmeras Ring ganham radar, design novo e agora podem despachar o robô Amazon Astro

Atualize seu estilo de vidaDigital Trends ajuda os leitores a manter o controle sobre o mundo acelerado da tecnologia com as últimas notícias, análises divertidas de produtos, editoriais criteriosos e prévias únicas.