Uusi verkkosovellus antaa Alexan keskustella kuurojen kanssa

amazon echo pimeässä
Greg Mombert/Digital Trends

Niin käteviksi kuin puheavustajat ovatkin osoittautuneet, nämä A.I.-käyttöiset työkalut eivät ole kyenneet palvelemaan kuurojen yhteisöä. Mutta yksi yritteliäs tietojenkäsittelytieteilijä on kehittänyt ratkaisun, jonka avulla kuulovammaiset voivat kokea korkeat ja matalat Amazon Alexa, Google Assistant ja Siri muiden kanssa. Abhishek Singh, joka nousi ensin tunnetuksi rakentaessaan Super Mario Bros lisätyssä todellisuudessa, on luonut verkkosovelluksen, joka käyttää kameraa viittomakielen lukemiseen ja kääntää sitten nämä sanat puhutuksi kieleksi Amazon Echoa varten. Kun Echo puhuu vastauksensa, koko prosessi etenee päinvastoin, jolloin kuulovammaiset tai kuurot voivat lukea koneella kirjoitetun vastauksen.

Tämä sovellus ylittää Amazon Echo Shown tarjoaman pseudoratkaisun, joka lisäsi näytön sovellukseen älykotikeskus, jotta kuurojen yhteisön jäsenet voivat olla vuorovaikutuksessa älykodin kanssa avustaja. Tämä ei kuitenkaan vielä sallinut Alexa ja sen käyttäjä todella keskustelemaan – Singhin tarjous kuitenkin korjaa tämän.

Suositellut videot

"Projekti oli ajatuskokeilu, jonka inspiraationa oli havaittu suuntaus yritysten keskuudessa käyttää äänipohjaisia ​​avustajia keinona luoda välitöntä, saumatonta vuorovaikutusta", hän kertoi. Nopea Yritys. "Jos näistä laitteista tulee keskeinen tapa olla vuorovaikutuksessa kodin kanssa tai suorittaa tehtäviä, on harkittava niitä, jotka eivät kuule tai puhu. Saumattoman suunnittelun tulee olla osallistava luonnossa.”

Järjestelmää rakentaessaan Singh koulutti A.I. järjestelmä koneoppimisalustassa Tensorflow, allekirjoittaa sanoja web-kameransa kautta ad nauseam "opettaakseen" järjestelmälle viittomakielen. Sitten hän lisäsi Googlen tekstistä puheeksi -ominaisuudet kääntääkseen viittomakielen puhutuiksi sanoiksi.

Vaikka Singhin ratkaisu on tyylikäs, koodaaja toivoo silti, että Amazon lopulta tunnistaa viittomakielen itsestään. "Tänne toivon tämän suuntaavan. Ja jos tämä projekti johtaa siihen suuntaan jollakin pienellä tavalla, niin tehtävä on suoritettu", hän sanoi. "Ihanteellisessa maailmassa olisin rakentanut tämän suoraan Showlle, mutta laitteet eivät ole vielä niin hakkeroituja, [en] löytänyt tapaa tehdä se."

Toimittajien suositukset

  • Mikä on Amazon Alexa ja mitä se voi tehdä?
  • Alexa vs. HomeKit: mikä älykkään kodin alusta on paras?
  • Amazon Alexa pyrkii virtaviivaistamaan sähköautojen latauskokemusta
  • 8 parasta Alexan lomakomentoa
  • Uudet Ring-kamerat saavat tutkan, uudenlaisen suunnittelun, ja nyt ne voivat lähettää Amazon Astron robotin

Päivitä elämäntapasiDigital Trends auttaa lukijoita pysymään tekniikan nopeatempoisessa maailmassa uusimpien uutisten, hauskojen tuotearvostelujen, oivaltavien toimitusten ja ainutlaatuisten kurkistusten avulla.