Nová webová aplikácia umožňuje Alexovi konverzovať s nepočujúcimi

amazonská ozvena v tme
Greg Mombert/Digitálne trendy

Akokoľvek sa hlasoví asistenti ukázali ako pohodlní, tieto nástroje poháňané AI zaostávajú v ich neschopnosti slúžiť komunite nepočujúcich. Ale jeden podnikavý počítačový vedec vyvinul riešenie, ktoré umožní ľuďom so sluchovým postihnutím zažiť vrcholy a pády Amazon Alexa, Google Assistant a Siri spolu so všetkými ostatnými. Abhishek Singh, ktorý sa prvýkrát dostal do popredia, keď postavil Super Mario Bros v rozšírenej realite vytvoril webovú aplikáciu, ktorá používa fotoaparát na čítanie posunkovej reči a následne tieto slová prekladá do hovoreného jazyka pre Amazon Echo. Keď Echo vysloví svoju odpoveď, celý proces sa odohrá opačne, výsledkom čoho je napísaná odpoveď pre sluchovo postihnutých alebo nepočujúcich, ktoré si môžu prečítať.

Táto aplikácia presahuje pseudo-riešenie, ktoré poskytuje Amazon Echo Show, ktorá pridala obrazovku inteligentné domáce centrum, aby umožnilo členom komunity nepočujúcich komunikovať s inteligentným domom asistent. To však stále neumožňovalo

Alexa a jeho používateľom skutočne viesť konverzáciu – Singhova ponuka to však opravuje.

Odporúčané videá

„Projekt bol myšlienkovým experimentom inšpirovaným pozorovaním trendu medzi spoločnosťami presadzovania hlasových asistentov ako spôsobu vytvárania okamžitých, bezproblémových interakcií,“ povedal. Rýchla spoločnosť. „Ak sa tieto zariadenia majú stať ústredným spôsobom, akým interagujeme s našimi domovmi alebo vykonávame úlohy, potom je potrebné sa zamyslieť nad tými, ktorí nepočujú ani nehovorí. Bezšvový dizajn musí byť inkluzívne v prírode.”

Pri budovaní systému Singh vyškolil A.I. systém v rámci platformy strojového učenia Tensorflow, podpisuje slová cez svoju webovú kameru do nevoľnosti, aby „naučil“ systémový posunkový jazyk. Potom pridal možnosti prevodu textu na reč Google, aby preložil posunkovú reč do hovorených slov.

Aj keď je Singhovo riešenie elegantné, kodér stále dúfa, že Amazon nakoniec rozpozná posunkový jazyk sám. „Dúfam, že to smeruje sem. A ak tento projekt povedie k posunu týmto smerom akýmkoľvek malým spôsobom, potom je misia splnená,“ povedal. "V ideálnom svete by som to postavil priamo na Show, ale zariadenia ešte nie sú také hacknuteľné, [ne] som schopný nájsť spôsob, ako to urobiť."

Odporúčania redaktorov

  • Čo je Amazon Alexa a čo dokáže?
  • Alexa vs. HomeKit: ktorá inteligentná domáca platforma je najlepšia?
  • Cieľom Amazon Alexa je zefektívniť nabíjanie elektromobilov
  • 8 najlepších dovolenkových príkazov Alexa
  • Nové Ring vačky majú radar, nový dizajn a teraz môžu posielať robota Amazon Astro

Zlepšite svoj životný štýlDigitálne trendy pomáhajú čitateľom mať prehľad o rýchlo sa rozvíjajúcom svete technológií so všetkými najnovšími správami, zábavnými recenziami produktov, užitočnými úvodníkmi a jedinečnými ukážkami.