Aplikasi Web Baru Memungkinkan Alexa Bercakap-cakap dengan Tunarungu

amazon bergema dalam kegelapan
Greg Mombert/Tren Digital

Meskipun asisten suara telah terbukti nyaman, alat yang didukung AI ini masih tertinggal dalam ketidakmampuannya untuk melayani komunitas tunarungu. Namun seorang ilmuwan komputer yang giat telah mengembangkan solusi yang memungkinkan mereka yang memiliki gangguan pendengaran merasakan suka dan duka. Amazon Alexa, Asisten Google, dan Siri serta orang lain. Abhishek Singh, yang pertama kali menjadi terkenal ketika ia membangun Super Mario Bros dalam augmented reality, telah membuat aplikasi web yang menggunakan kamera untuk membaca bahasa isyarat, dan kemudian menerjemahkan kata-kata tersebut ke dalam bahasa lisan untuk Amazon Echo. Saat Echo menyampaikan tanggapannya, seluruh proses berjalan terbalik, sehingga menghasilkan balasan yang diketik untuk dibaca oleh orang yang memiliki gangguan pendengaran atau tuna rungu.

Aplikasi ini melampaui solusi semu yang disediakan oleh Amazon Echo Show, yang menambahkan layar ke hub rumah pintar untuk memungkinkan anggota komunitas tunarungu berinteraksi dengan rumah pintar asisten. Namun, hal ini tetap tidak memungkinkan

Alexa dan penggunanya untuk benar-benar melakukan percakapan – namun, penawaran Singh memperbaiki hal ini.

Video yang Direkomendasikan

“Proyek ini merupakan eksperimen pemikiran yang terinspirasi dari pengamatan tren di kalangan perusahaan yang mendorong asisten berbasis suara sebagai cara untuk menciptakan interaksi yang instan dan lancar,” katanya. Perusahaan Cepat. “Jika perangkat ini ingin menjadi cara utama kita berinteraksi dengan rumah atau melakukan tugas, maka perhatian perlu diberikan kepada mereka yang tidak dapat mendengar atau berbicara. Desain yang mulus harus ada bersifat inklusif.”

Dalam membangun sistem, Singh melatih A.I. sistem dalam platform pembelajaran mesin Tensorflow, menandatangani kata-kata melalui webcamnya dan membuat mual untuk "mengajarkan" bahasa isyarat sistem. Dia kemudian menambahkan kemampuan text-to-speech Google untuk menerjemahkan bahasa isyarat menjadi kata-kata yang diucapkan.

Meskipun solusi Singh adalah solusi yang elegan, pembuat kode masih berharap Amazon pada akhirnya akan mengenali bahasa isyarat dengan sendirinya. “Di situlah saya berharap hal ini mengarah. Dan jika proyek ini mengarah pada dorongan ke arah tersebut dengan cara sekecil apa pun, maka misi tersebut tercapai,” katanya. “Idealnya, saya akan membuat ini langsung di acara tersebut, namun perangkatnya belum bisa diretas, [saya] belum bisa menemukan cara untuk melakukannya.”

Rekomendasi Editor

  • Apa itu Amazon Alexa dan apa fungsinya?
  • Alexa vs. HomeKit: platform rumah pintar mana yang terbaik?
  • Amazon Alexa bertujuan untuk menyederhanakan pengalaman pengisian daya EV
  • 8 perintah liburan Alexa terbaik
  • Kamera Ring baru mendapatkan radar, desain baru, dan sekarang mereka dapat mengirimkan robot Amazon Astro

Tingkatkan gaya hidup AndaTren Digital membantu pembaca mengawasi dunia teknologi yang bergerak cepat dengan semua berita terkini, ulasan produk yang menyenangkan, editorial yang berwawasan luas, dan cuplikan unik.