Uus veebirakendus võimaldab Alexal kurtidega vestelda

amazon kaja pimedas
Greg Mombert / Digitaalsed trendid

Nii mugavad, kui häälassistendid end tõestanud on, on need A.I-toega tööriistad jäänud kurtide kogukonna teenindamiseks maha. Kuid üks ettevõtlik arvutiteadlane on välja töötanud lahenduse, mis võimaldab kuulmispuudega inimestel kogeda Amazon Alexa, Google'i assistent ja Siri koos kõigi teistega. Abhishek Singh, kes tõusis esimest korda silmapaistvaks, kui ta ehitas Super Mario Bros on liitreaalsuses loonud veebirakenduse, mis kasutab kaamerat viipekeele lugemiseks ja tõlgib need sõnad Amazon Echo jaoks kõnekeelde. Kui kaja ütleb oma vastuse, toimub kogu protsess vastupidiselt, mille tulemuseks on vaegkuuljatele või kurtidele lugemiseks trükitud vastus.

See rakendus ületab Amazon Echo Show pakutava pseudolahenduse, mis lisas ekraanile nutikodu keskus, et võimaldada kurtide kogukonna liikmetel nutikoduga suhelda assistent. See aga ikkagi ei võimaldanud Alexa ja selle kasutajaga tõeliselt vestelda – Singhi pakkumine aga parandab selle.

Soovitatavad videod

"Projekt oli mõtteeksperiment, mis on inspireeritud ettevõtete seas levinud suundumusest kasutada häälepõhiseid assistente, et luua vahetu ja sujuv suhtlus," rääkis ta. Kiire ettevõte. „Kui neist seadmetest saaks keskne viis, kuidas me oma koduga suhtleme või ülesandeid täidame, tuleb mõelda neile, kes ei kuule ega räägi. Sujuv disain peab olema looduses kaasav.”

Süsteemi ehitamisel koolitas Singh A.I. süsteem masinõppeplatvormis Tensorflow, allkirjastades sõnu oma veebikaamera kaudu, et süsteemile viipekeelt "õpetada". Seejärel lisas ta Google'i teksti kõneks muutmise võimalused, et tõlkida viipekeel suulisteks sõnadeks.

Kuigi Singhi lahendus on elegantne, loodab kodeerija siiski, et Amazon tunneb viipekeele lõpuks ise ära. "Loodan, et see on koht, kuhu see läheb. Ja kui see projekt viib vähegi selles suunas tõuke, siis missioon on täidetud,“ ütles ta. "Ideaalses maailmas oleksin selle otse saatesse ehitanud, kuid seadmed pole veel nii häkitavad, [ma] ei suutnud leida viisi, kuidas seda teha."

Toimetajate soovitused

  • Mis on Amazon Alexa ja mida see teha saab?
  • Alexa vs. HomeKit: milline nutika kodu platvorm on parim?
  • Amazon Alexa eesmärk on muuta elektrisõidukite laadimise kogemus sujuvamaks
  • 8 parimat Alexa puhkusekäsku
  • Uued Ring-kaamerad saavad radari, värske disaini ja nüüd saavad nad saata Amazon Astro roboti

Uuenda oma elustiiliDigitaalsed suundumused aitavad lugejatel hoida silma peal kiirel tehnikamaailmal kõigi viimaste uudiste, lõbusate tooteülevaadete, sisukate juhtkirjade ja ainulaadsete lühiülevaadetega.