Facebook laver AR-briller, der forbedrer hørelsen

Normalt vil nyheden om, at et forskningslaboratorium bliver forvandlet til en bar, tyde på, at det har fejlet, og dets forskere kaster håndklædet i ringen. Men i tilfældet med Facebook Reality Labs Research, et laboratorium dedikeret (delvis) til at komme med kreativt nyt måder at forbedre hørelsen for medlemmer af døve eller hørehæmmede samfund på, viste det, at dets arbejde betalte sig af.

Facebooks erklærede mission er at hjælpe folk med at forbinde og kommunikere med hinanden. Det er derfor, selvom det kan virke off-mission at tackle dette projekt, så passer det faktisk perfekt ind i virksomhedens kernekompetencer.

Problemet Facebook har forsøgt at tackle er, hvordan man kan forbedre lydoptagelsen for personer i støjende omgivelser. Selvom mange mennesker med høretab, afhængigt af dets sværhedsgrad, finder det muligt at høre og interagere i en-til-en situationer i rolige omgivelser, støjende omgivelser som barer eller travle sociale omgivelser kan være en hel masse hårdere. Med det i tankerne har Facebook undersøgt, hvordan det kan kombinere stråleformende teknologi, dybt læring, støjreduktion og - måske mest overraskende - augmented reality (AR) for at forbedre dette situation.

I et nyligt projekt har Facebook-forskere undersøgt, hvordan augmented reality-briller kunne hjælpe med at bestemme, hvilke lyde folk ønsker at forstærke ved at se på, ja, hvor de kigger. Ved at matche en persons fokus, i forhold til hvad de ser på, til lydinput, kan AR-briller finde ud af hvilke lyde en person ønsker at høre, og hvilke de ikke gør - og ring derefter op eller ned for lydkanalerne derfor. Som en del af sine eksperimenter på dette område, Facebook forvandlet arbejdsområdet, hvor meget af denne undersøgelse udføres, til en falsk bar for at udforske, hvordan den ville fungere på et sted med flere støjende lydinput.

"Mange mennesker med høretab bruger ikke høreapparater - til dels - fordi de ikke fungerer godt i hverdagen situationer som en larmende restaurant, en samtale, der involverer flere personer til en højlydt fest eller i en flytning bil," Thomas Lunner, forskningsleder for Facebooks Hearing Science-laboratorium, fortalte Digital Trends. "Da vi udførte vores forbedrede høreforskning for AR-briller, indså vi, at nogle af de opdagelser, vi gjorde, kunne være relevante for at løse dette problem. I [vores nye forskning] viser vi, hvordan augmented reality kunne supplere høreapparatet, gennem et system, der forstår, hvad du vil lytte til, isolerer og forbedrer de lyde, du ønsker at høre, og reducerer distraherende baggrundsstøj. Ved derefter at sende det forbedrede AR-behandlede signal til høreapparatet, får du også et system, der tilpasser sig din unikke høreevne.”

Spiller efter Facebook Researchs styrker

Lunner er ingen novice, når det kommer til dette forskningsområde. Han er en anerkendt høreforsker, hvis arbejde lagde grundlaget for det, der blev verdens første digitale høreapparat i 1995. Denne forskning, mens den stadig er i de tidlige stadier, udnytter en række forskningsområder for Facebook, såsom billedgenkendelse, naturlig sprogbehandling og meget mere.

"Hørevidenskab er et område, vi lige er begyndt at udforske, så denne teknologi er ikke tilgængelig på nogen af ​​vores produkter, men vi er meget begejstrede for mulighederne med AR-briller,” Lunner fortsatte. "Vi tror, ​​de en dag kan hjælpe med at levere alle mulige forbedringer, herunder at hjælpe alle, der har høretab eller bare har svært ved at forstå folk til en fest."

Michael Abrash, chefforsker ved Facebook Reality Labs, fortalte Digital Trends, at han mener, at både augmented og virtual reality kunne have dybtgående implikationer (og applikationer) i tilgængelighedsområdet.

"AR og VR har et enormt potentiale til gavn for alle, men de har især et højt potentiale for mennesker med forskellige fysiske evner," sagde Abrash. "For eksempel kan AR-briller en dag være i stand til at øge kontrasten for at hjælpe mennesker med dårligt syn se bedre og kan muligvis give visuel feedback om omgivende lyde og tale til hørelsen svækket. Som et andet eksempel tror vi, at VR - og i sidste ende AR - en dag vil være i stand til at skabe ultrarealistiske virtuelle rum og avatarer, der gør det muligt for dem med mobilitetsudfordringer at teleportere til kontoret eller til deres bedstemors bolig værelse."

Facebook er selvfølgelig bedst kendt for sit sociale netværk. Men ligesom Googles moderselskab Alphabet, der udforsker selvkørende biler, kortsystemer og drone leverancer ved siden af ​​søgning, Facebook er interesseret i langt mere end blot nyhedsfeeds og tidslinjer. Tidligere har det vist betydelig interesse for både VR og AR - med alt fra dets opkøb af Oculus til skabelsen af Spark AR Studio. Facebook har stadig ikke vist sin hånd, når det kommer til meget af denne teknologi. Alligevel, hvis dette arbejde er noget at gå efter, ser det ud til at Facebook kunne bruge sin betydelige magt til gode, når det kommer til fremtiden for at forbinde mennesker.

Et papir, der beskriver arbejdet, med titlen "Potentialet for Augmented Reality Platforms to Improving Individual Hearing Aids and to Support More Ecoological Valid Research," var for nylig offentliggjort i tidsskriftet Ear & Hearing.

Redaktørens anbefalinger

• Apple VR-headset på vej, AR-briller kommer senere
• Facebook bekræfter igen, at det arbejder på AR-briller, kun få uger efter, at lækagen sagde, at det var det