אפליקציית אינטרנט חדשה מאפשרת לאלקסה לנהל שיחה עם חירשים

אמזון הד בחושך
גרג מומברט/טרנדים דיגיטליים

עד כמה שהעוזרים הקוליים הוכיחו את עצמם כנוחים, הכלים הללו המופעלים על ידי A.I פיגרו בחוסר יכולתם לשרת את קהילת החירשים. אבל מדען מחשבים יוזם אחד פיתח פתרון שיאפשר לבעלי לקויות שמיעה לחוות את השיאים והשפל של אמזון אלקסה, Google Assistant ו-Siri יחד עם כל השאר. Abhishek Singh, שעלה לראשונה לגדולה כשבנה האחים סופר מריו במציאות רבודה, יצרה אפליקציית אינטרנט המשתמשת במצלמה לקריאת שפת הסימנים, ולאחר מכן מתרגמת את המילים הללו לשפה מדוברת עבור Amazon Echo. כאשר ה-Echo משמיע את תגובתו, כל התהליך מתרחש הפוך, וכתוצאה מכך תשובה מוקלדת עבור לקויי שמיעה או חירשים לקריאה.

אפליקציה זו חורגת מהפתרון הפסאודו שסופק על ידי Amazon Echo Show, שהוסיפה מסך ל- רכזת בית חכם על מנת לאפשר לחברי קהילת החירשים ליצור אינטראקציה עם הבית החכם עוֹזֵר. עם זאת, זה עדיין לא אפשר אלכסה והמשתמש שלו באמת לנהל שיחה - ההצעה של סינג, לעומת זאת, מתקנת את זה.

סרטונים מומלצים

"הפרויקט היה ניסוי מחשבתי בהשראת התבוננות במגמה בקרב חברות של דחיפה של עוזרים מבוססי קול כדרך ליצור אינטראקציות מיידיות וחלקות", אמר.

חברה מהירה. "אם המכשירים האלה יהפכו לדרך מרכזית שבה אנחנו מתקשרים עם הבית שלנו או מבצעים משימות, אז צריך להקדיש מחשבה לאלה שאינם יכולים לשמוע או לדבר. עיצוב חלק צריך להיות כולל בטבע.”

בבניית המערכת, סינג הכשיר A.I. מערכת בתוך פלטפורמת למידה חישובית Tensorflow, חותם מילים דרך מצלמת האינטרנט שלו מודעה לבחילה על מנת "ללמד" את שפת הסימנים של המערכת. לאחר מכן הוא הוסיף את יכולות הטקסט לדיבור של גוגל על ​​מנת לתרגם את שפת הסימנים למילים מדוברות.

בעוד שהפתרון של סינג הוא פתרון אלגנטי, הקודן עדיין מקווה שאמזון תזהה בסופו של דבר את שפת הסימנים בעצמה. "לשם אני מקווה שזה יוביל. ואם הפרויקט הזה יוביל לדחיפה בכיוון הזה בכל דרך קטנה, אז המשימה הושלמה", אמר. "בעולם אידיאלי, הייתי בונה את זה ישירות בתוכנית, אבל המכשירים עדיין לא ניתנים לפריצה עד כדי כך, [אני] לא הצלחתי למצוא דרך לעשות את זה."

המלצות עורכים

  • מהי אמזון אלקסה ומה היא יכולה לעשות?
  • אלכסה נגד HomeKit: איזו פלטפורמת בית חכם היא הטובה ביותר?
  • אמזון אלקסה שואפת לייעל את חווית הטעינה של EV
  • 8 פקודות החג הטובות ביותר של אלקסה
  • מצלמות רינג חדשות זוכות לרדאר, עיצוב רענן, ועכשיו הן יכולות לשלוח את הרובוט של אמזון אסטרו

שדרג את אורח החיים שלךמגמות דיגיטליות עוזרות לקוראים לעקוב אחר עולם הטכנולוגיה המהיר עם כל החדשות האחרונות, ביקורות מהנות על מוצרים, מאמרי מערכת מעוררי תובנות והצצות מיוחדות במינן.