„Facebook“ kuria AR akinius, kurie pagerina klausą

Paprastai žinia, kad tyrimų laboratorija paverčiama baru, leistų manyti, kad ji žlugo, o jos tyrėjai meta į rankas. Tačiau „Facebook Reality Labs Research“ atveju laboratorija, skirta (iš dalies) kūrybiškiems naujiems sugalvoti būdai pagerinti kurčiųjų ar neprigirdinčiųjų bendruomenės narių klausą, parodė, kad jos darbas buvo apmokamas išjungti.

Nurodyta „Facebook“ misija yra padėti žmonėms susisiekti ir bendrauti vieniems su kitais. Štai kodėl, nors gali atrodyti, kad šio projekto įgyvendinimas yra nepriimtinas, jis iš tikrųjų puikiai atitinka pagrindines įmonės kompetencijas.

Problema Facebook buvo bandoma spręsti, kaip pagerinti garso paėmimą asmenims triukšmingoje aplinkoje. Nors daugelis žmonių, turinčių klausos praradimą, atsižvelgiant į jo sunkumą, gali girdėti ir bendrauti individualios situacijos ramiose vietose, triukšmingoje aplinkoje, pvz., baruose ar judrioje socialinėje aplinkoje, gali būti labai daug kietesnis. Atsižvelgdama į tai, „Facebook“ tiria, kaip giliai sujungti spindulių formavimo technologiją mokymasis, triukšmo slopinimas ir, ko gero, labiausiai stebina papildyta realybė (AR), siekiant tai pagerinti situacija.

Neseniai vykdytame projekte „Facebook“ mokslininkai tyrinėjo, kaip papildytos realybės akiniai galėtų padėti nustatyti, kokius garsus žmonės nori sustiprinti žiūrėdami, kur jie žiūri. Suderinus žmogaus dėmesį, į ką jis žiūri, su garso įvestimis, AR akiniai gali išsiaiškinti kokius garsus žmogus nori girdėti, o kokių ne – tada surinkite garso kanalus aukštyn arba žemyn atitinkamai. Vykdydami eksperimentus šioje srityje, Facebook Darbo sritis, kurioje atliekama didžioji šio tyrimo dalis, pavertė netikra juosta, kad išsiaiškintų, kaip ji veiktų vietoje su daugybe triukšmingų garso įvesties.

„Daugelis klausos sutrikimų turinčių žmonių nenaudoja klausos aparatų – iš dalies – nes jie neveikia kasdien situacijose, pavyzdžiui, triukšmingame restorane, pokalbyje, kuriame dalyvauja keli žmonės garsiame vakarėlyje arba kraustymosi metu automobilis“, Tomas Lunneris, „Facebook“ klausos mokslų laboratorijos tyrimo vadovas, pasakojo „Digital Trends“. „Atlikdami patobulintus AR akinių klausos tyrimus supratome, kad kai kurie mūsų atradimai gali būti svarbūs sprendžiant šią problemą. [mūsų naujame tyrime] parodome, kaip papildyta realybė galėtų papildyti klausos aparatą, naudojant sistemą, kuri supranta, ko norite klausytis, izoliuoja ir sustiprina norimus girdėti garsus ir sumažina blaškymąsi foninis triukšmas. Tada siųsdami patobulintą AR apdorotą signalą į klausos aparatą, taip pat gausite sistemą, kuri prisitaiko prie jūsų unikalaus klausos gebėjimo.

Žaisti iš „Facebook Research“ stipriųjų pusių

Lunner nėra naujokas, kai kalbama apie šią tyrimų sritį. Jis yra garsus klausos mokslininkas, kurio darbas padėjo pagrindą tam, kas 1995 m. tapo pirmuoju pasaulyje skaitmeniniu klausos aparatu. Šis tyrimas, nors ir dar tik pradiniame etape, apima daugybę „Facebook“ tyrimų sričių, tokių kaip vaizdo atpažinimas, natūralios kalbos apdorojimas ir daug daugiau.

„Klausos mokslai yra sritis, kurią tik pradedame tyrinėti, todėl šios technologijos nėra bet kurį iš mūsų gaminių, bet mes labai džiaugiamės galimybėmis su AR akiniais “, - Lunner tęsė. „Manome, kad vieną dieną jie galėtų padėti įgyvendinti įvairius patobulinimus, įskaitant pagalbą visiems, kurie turi klausos sutrikimų arba tiesiog negali suprasti žmonių vakarėlyje.

Maiklas Abrašas„Facebook Reality Labs“ vyriausiasis mokslininkas sakė „Digital Trends“ manantis, kad tiek papildyta, tiek virtuali realybė gali turėti didelių pasekmių (ir taikomųjų programų) prieinamumo erdvėje.

"AR ir VR turi didžiulį potencialą būti naudingi visiems, tačiau jie turi ypač didelį potencialą žmonėms su skirtingais fiziniais gebėjimais", - sakė Abrashas. „Pavyzdžiui, AR akiniai vieną dieną gali sustiprinti kontrastą, kad padėtų žmonėms, turintiems silpną regėjimą geriau matyti ir gali suteikti klausytojui vaizdinį grįžtamąjį ryšį apie aplinkos garsus ir kalbą sutrikusi. Kitas pavyzdys, manome, kad VR – ir galiausiai AR – vieną dieną galės sukurti itin realistiškas virtualias erdves. ir avatarai, kurie leis žmonėms, turintiems judėjimo problemų, teleportuotis į biurą arba į savo močiutės namus kambarys."

„Facebook“, be abejo, geriausiai žinomas dėl savo socialinio tinklo. Bet kaip ir „Google“ patronuojanti įmonė „Alphabet“, kuri tyrinėja savarankiškai važiuojančius automobilius, žemėlapių sistemas ir dronų pristatymai kartu su paieška, Facebook domisi kur kas daugiau nei tik naujienų srautais ir laiko juostomis. Anksčiau jis rodė didelį susidomėjimą tiek VR, tiek AR - viskuo, pradedant nuo įsigijimo Oculus prie sukūrimo Spark AR studija. Facebook vis dar turi parodyti savo ranką, kai kalbama apie daugybę šios technologijos. Vis dėlto, jei šis darbas yra kuo nors dėtas, atrodo, kad taip Facebook galėtų panaudoti savo didelę galią gerovei, kai kalbama apie žmonių sujungimą.

Buvo paskelbtas darbas, apibūdinantis darbą, pavadintą „Papildytos realybės platformų potencialas tobulinti individualius klausos aparatus ir paremti ekologiškesnius tyrimus“. neseniai paskelbtas žurnale Ear & Hearing.

Redaktorių rekomendacijos

• „Apple VR“ ausinės ruošiamos, AR akiniai pasirodys vėliau
• „Facebook“ dar kartą patvirtina, kad dirba su AR akiniais, praėjus vos kelioms savaitėms po informacijos nutekėjimo