Ново уеб приложение позволява на Alexa да води разговор с глухите

amazon ехо в тъмното
Грег Момбърт/Дигитални тенденции

Колкото и удобни да са се доказали гласовите асистенти, тези инструменти, задвижвани от изкуствен интелект, са изостанали в неспособността си да обслужват общността на глухите. Но един предприемчив компютърен учен е разработил решение, което ще позволи на хората с увреден слух да изпитат високите и ниските нива на Amazon Alexa, Google Assistant и Siri заедно с всички останали. Абхишек Сингх, който за пръв път стана известен, когато построи Super Mario Bros в разширената реалност, създаде уеб приложение, което използва камера, за да чете езика на знаците, и след това превежда тези думи на говорим език за Amazon Echo. Когато Echo изговаря отговора си, целият процес се развива в обратен ред, което води до въведен отговор за четене от хора с увреден слух или глухи.

Това приложение надхвърля псевдорешението, предоставено от Amazon Echo Show, което добави екран към център за интелигентен дом, за да позволи на членовете на общността на глухите да взаимодействат с интелигентния дом асистент. Това обаче все още не позволяваше

Алекса и неговият потребител наистина да води разговор – предложението на Сингх обаче коригира това.

Препоръчани видеоклипове

„Проектът беше мисловен експеримент, вдъхновен от наблюдаването на тенденция сред компаниите да налагат гласови асистенти като начин за създаване на незабавни, безпроблемни взаимодействия“, каза той Бърза компания. „Ако тези устройства трябва да се превърнат в централен начин, по който взаимодействаме с домовете си или изпълняваме задачи, тогава трябва да се помисли за тези, които не могат да чуват или говорят. Трябва да има безпроблемен дизайн приобщаващ характер.”

При изграждането на системата Сингх обучи A.I. система в рамките на платформата за машинно обучение Tensorflow, подписвайки думи през уеб камерата си ad nauseam, за да „обучи“ езика на знаците на системата. След това той добави възможностите на Google за преобразуване на текст в реч, за да преведе езика на знаците в изговорени думи.

Въпреки че решението на Сингх е елегантно, кодерът все още се надява, че Amazon в крайна сметка ще разпознае езика на знаците сам. „Надявам се да стигне дотам. И ако този проект доведе до тласък в тази посока по някакъв малък начин, тогава мисията е изпълнена“, каза той. „В един идеален свят щях да създам това директно в шоуто, но устройствата все още не са толкова хакнати, [аз] не успях да намеря начин да го направя.“

Препоръки на редакторите

  • Какво е Amazon Alexa и какво може да прави?
  • Алекса срещу. HomeKit: коя платформа за интелигентен дом е най-добра?
  • Amazon Alexa има за цел да рационализира изживяването при зареждане на EV
  • 8-те най-добри празнични команди на Alexa
  • Новите камери Ring получават радар, свеж дизайн и сега могат да изпращат робота на Amazon Astro

Надградете начина си на животDigital Trends помага на читателите да следят забързания свят на технологиите с всички най-нови новини, забавни ревюта на продукти, проницателни редакционни статии и единствени по рода си кратки погледи.