Какими бы удобными ни были голосовые помощники, эти инструменты на базе искусственного интеллекта отстают в своей неспособности служить сообществу глухих. Но один предприимчивый учёный-компьютерщик разработал решение, которое позволит людям с нарушениями слуха испытать плюсы и минусы Амазонка Алекса, Google Assistant и Siri вместе со всеми остальными. Абхишек Сингх, который впервые приобрел известность, когда построил Супер Марио Братья в дополненной реальности создал веб-приложение, которое использует камеру для чтения языка жестов, а затем переводит эти слова на разговорный язык для Amazon Echo. Когда Echo произносит свой ответ, весь процесс происходит в обратном порядке, в результате чего получается напечатанный ответ, который смогут прочитать люди с нарушениями слуха или глухие.
Это приложение выходит за рамки псевдорешения Amazon Echo Show, которое добавило экран к центр умного дома, позволяющий членам сообщества глухих взаимодействовать с умным домом помощник. Однако это еще не позволило
Алекса и его пользователю по-настоящему поговорить — однако предложение Сингха исправляет это.Рекомендуемые видео
«Этот проект представлял собой мысленный эксперимент, вдохновленный наблюдением за тенденцией среди компаний продвигать голосовых помощников как способ создания мгновенного и беспрепятственного взаимодействия», — сказал он. Фаст Компани. «Если эти устройства должны стать основным способом взаимодействия с нашими домами или выполнения задач, то необходимо уделить некоторое внимание тем, кто не может слышать или говорить. Бесшовный дизайн должен быть инклюзивный по своей природе.”
Создавая систему, Сингх обучил ИИ. системы на платформе машинного обучения Tensorflow, до тошноты подписывая слова через свою веб-камеру, чтобы «обучить» систему языку жестов. Затем он добавил возможности Google по преобразованию текста в речь, чтобы переводить язык жестов в устные слова.
Хотя решение Сингха элегантно, программист все еще надеется, что Amazon в конечном итоге самостоятельно распознает язык жестов. «Вот к этому, я надеюсь, все и приведет. И если этот проект хоть в малейшей степени приведет к толчку в этом направлении, значит, миссия выполнена», — сказал он. «В идеальном мире я бы построил это непосредственно на шоу, но устройства пока не так легко взломать, [я] не смог найти способ сделать это».
Рекомендации редакции
- Что такое Amazon Alexa и что она может?
- Алекса против. HomeKit: какая платформа для умного дома лучше?
- Amazon Alexa стремится упростить процесс зарядки электромобилей
- 8 лучших праздничных команд Alexa
- Новые камеры Ring получили радар, новый дизайн и теперь могут управлять роботом Amazon Astro.
Обновите свой образ жизниDigital Trends помогает читателям быть в курсе быстро меняющегося мира технологий благодаря всем последним новостям, забавным обзорам продуктов, содержательным редакционным статьям и уникальным кратким обзорам.
