Eine neue Web-App ermöglicht Alexa ein Gespräch mit Gehörlosen

Amazon Echo im Dunkeln
Greg Mombert/Digitale Trends

So praktisch sich Sprachassistenten auch erwiesen haben, diese KI-gestützten Tools sind nicht in der Lage, der Gehörlosengemeinschaft zu dienen. Doch ein unternehmungslustiger Informatiker hat eine Lösung entwickelt, die es Menschen mit Hörbehinderung ermöglicht, die Höhen und Tiefen zu erleben Amazon Alexa, Google Assistant und Siri zusammen mit allen anderen. Abhishek Singh, der als Bauunternehmer erstmals Berühmtheit erlangte Super Mario Bros in Augmented Reality hat eine Webanwendung entwickelt, die mithilfe einer Kamera Gebärdensprache liest und diese Wörter dann für ein Amazon Echo in gesprochene Sprache übersetzt. Wenn das Echo seine Antwort spricht, läuft der gesamte Vorgang in umgekehrter Reihenfolge ab, sodass eine getippte Antwort für hörgeschädigte oder gehörlose Menschen zum Lesen entsteht.

Diese App geht über die Pseudolösung der Amazon Echo Show hinaus, die einen Bildschirm zum hinzugefügt hat Smart-Home-Hub, um Mitgliedern der Gehörlosengemeinschaft die Interaktion mit dem Smart Home zu ermöglichen Assistent. Dies war jedoch immer noch nicht möglich

Alexa und seinem Benutzer, wirklich ein Gespräch zu führen – Singhs Angebot behebt dieses Problem jedoch.

Empfohlene Videos

„Das Projekt war ein Gedankenexperiment, das von der Beobachtung eines Trends bei Unternehmen inspiriert wurde, sprachbasierte Assistenten voranzutreiben, um sofortige, nahtlose Interaktionen zu ermöglichen“, sagte er Schnelles Unternehmen. „Wenn diese Geräte zu einem zentralen Mittel werden sollen, mit dem wir mit unseren Häusern interagieren oder Aufgaben erledigen, dann müssen wir über diejenigen nachdenken, die weder hören noch sprechen können. Nahtloses Design muss sein inklusiver Natur.”

Beim Aufbau des Systems trainierte Singh eine KI. System innerhalb der Plattform für maschinelles Lernen Tensorflow, der bis zum Überdruss Wörter über seine Webcam signiert, um dem System die Gebärdensprache beizubringen. Anschließend fügte er die Text-to-Speech-Funktionen von Google hinzu, um die Gebärdensprache in gesprochene Wörter zu übersetzen.

Obwohl Singhs Lösung elegant ist, hofft der Programmierer dennoch, dass Amazon die Gebärdensprache letztendlich selbst erkennen wird. „Das ist die Richtung, in die ich hoffe. Und wenn dieses Projekt auch nur im Kleinen zu einem Vorstoß in diese Richtung führt, dann ist die Mission erfüllt“, sagte er. „In einer idealen Welt hätte ich das direkt in der Show gebaut, aber die Geräte sind noch nicht so hackbar, [ich] konnte keinen Weg finden, das zu tun.“

Empfehlungen der Redaktion

  • Was ist Amazon Alexa und was kann es?
  • Alexa vs. HomeKit: Welche Smart-Home-Plattform ist die beste?
  • Amazon Alexa zielt darauf ab, das Ladeerlebnis von Elektrofahrzeugen zu optimieren
  • Die 8 besten Alexa-Weihnachtsbefehle
  • Neue Ring-Kameras erhalten Radar, neues Design und können jetzt den Roboter von Amazon Astro versenden

Werten Sie Ihren Lebensstil aufDigital Trends hilft Lesern mit den neuesten Nachrichten, unterhaltsamen Produktrezensionen, aufschlussreichen Leitartikeln und einzigartigen Einblicken, den Überblick über die schnelllebige Welt der Technik zu behalten.