Hoe handig stemassistenten zich ook hebben bewezen, deze door AI aangedreven hulpmiddelen zijn achtergebleven in hun onvermogen om de dovengemeenschap te dienen. Maar een ondernemende computerwetenschapper heeft een oplossing ontwikkeld waarmee mensen met gehoorproblemen de hoogte- en dieptepunten kunnen ervaren van Amazon Alexa, Google Assistant en Siri, samen met alle anderen. Abhishek Singh, die voor het eerst bekendheid kreeg toen hij bouwde Super Mario Bros in augmented reality heeft een webapplicatie gemaakt die een camera gebruikt om gebarentaal te lezen en die woorden vervolgens vertaalt naar gesproken taal voor een Amazon Echo. Wanneer de Echo zijn antwoord uitspreekt, verloopt het hele proces in omgekeerde volgorde, wat resulteert in een getypt antwoord dat slechthorende of dove mensen kunnen lezen.
Deze app gaat verder dan de pseudo-oplossing van de Amazon Echo Show, die een scherm aan de app heeft toegevoegd smart home-hub om leden van de dovengemeenschap in staat te stellen met het smart home te communiceren assistent. Dit liet echter nog steeds niet toe
Alexa en de gebruiker om echt een gesprek te voeren – het aanbod van Singh lost dit echter op.Aanbevolen video's
“Het project was een gedachte-experiment, geïnspireerd door het observeren van een trend onder bedrijven om stemgebaseerde assistenten te pushen als een manier om directe, naadloze interacties te creëren,” vertelde hij. Snel bedrijf. “Als deze apparaten een centrale manier moeten worden waarop we met ons huis omgaan of taken uitvoeren, dan moeten we nadenken over degenen die niet kunnen horen of spreken. Naadloos ontwerp moet dat zijn inclusief karakter.”
Bij het bouwen van het systeem trainde Singh een A.I. systeem binnen het machine learning-platform Tensorflow, waarbij hij woorden via zijn webcam ad nauseam ondertekent om de gebarentaal van het systeem te ‘leren’. Vervolgens voegde hij de tekst-naar-spraak-mogelijkheden van Google toe om de gebarentaal in gesproken woorden te vertalen.
Hoewel de oplossing van Singh elegant is, hoopt de programmeur nog steeds dat Amazon uiteindelijk zelf gebarentaal zal herkennen. ‘Dat is waar ik hoop dat dit naartoe gaat. En als dit project op een kleine manier tot een duw in die richting leidt, dan is de missie geslaagd”, zei hij. “In een ideale wereld zou ik dit rechtstreeks op de Show hebben gebouwd, maar de apparaten zijn nog niet zo hackbaar, [ik] kon geen manier vinden om het te doen.”
Aanbevelingen van de redactie
- Wat is Amazon Alexa en wat kan het doen?
- Alexa versus HomeKit: welk smart home-platform is het beste?
- Amazon Alexa heeft tot doel de EV-laadervaring te stroomlijnen
- De 8 beste Alexa-vakantieopdrachten
- Nieuwe Ring-cams krijgen radar, een nieuw ontwerp en nu kunnen ze de robot van Amazon Astro sturen
Upgrade uw levensstijlMet Digital Trends kunnen lezers de snelle technische wereld in de gaten houden met het laatste nieuws, leuke productrecensies, inzichtelijke redactionele artikelen en unieke sneak peeks.
