„Action Audio“ sporto transliacijos yra kaip Brailio raštas jūsų ausims

THWOK. Ponk. Thwok. Ponk. THWOK. PONK. Thwok. Džiaugsmas sustiprėja. Ponk. THWOK. Sportbačių girgždesys ant asfalto. PONK. Pauzė. Entuziastingi plojimai.

Atpažinti? Žinoma, kad ne. Tiesą sakant, tai Rogerio Federerio.neįmanomas šūvis“ prieš Andre Agassi 2005 m. Dubajaus teniso čempionato ketvirtfinalyje. Tai maždaug tokia tobula teniso akimirka, kokią galima tikėtis, nes ji yra nesuprantama dėl to, kad čia atkurta kaip abstraktus garso peizažas.

Kaip tenisą lengva sekti vizualiai, garso lygmeniu, jį stebėti taip pat sunku, kaip ir Tvin Pyksas įjungėte įpusėjus. Tai iššūkis inžinieriams iš Tennis Australia, skaitmeninio dizaino ir komunikacijos agentūros AKQA, ir Monasho universitetas Melburne, Australijoje, stengiasi išspręsti problemą, vadinamą Action Garsas. Tai internetinis garso srautas, sukurtas praėjusio mėnesio „Australian Open“ transliacijoms, siekiant padėti 285 milijonai žmonių visame pasaulyje – daugelis iš jų yra teniso gerbėjai – gyvena su aklumu ar regėjimu sutrikimas.

„Lengvas būdas tai suprasti – ar esate susipažinę su garso aprašymais? Timas Devinas, AKQA vykdomasis kūrybinis direktorius, pasakojo „Digital Trends“. „Daug aklųjų ir silpnaregių juos naudoja. Tai yra abstrakti garso aprašymų versija, skirta žmonėms suteikti daugiau informacijos apie tai, kas vyksta [teiste].

Taigi iš esmės komentarai?

Žinoma, yra tam tikras garso aprašymas, kuris sporte egzistavo daugelį metų – ir tai yra tas pats kuri leidžia sporto gerbėjams klausytis sporto per radiją, kur vaizdų nėra per daug tiekimas. Tačiau žinovų garso komentarai nėra tas pats, kas galimybė stebėti žaidimą ir padaryti savo išvadas. Idėja apie Veiksmo garsas yra nufotografuoti veiksmus teisme ir paversti juos nepastebima veiksmo užuomina kalba – su skirtingais garsais, iliustruojančiais priekinius, atbulus, labai artimus kadrus ir daugiau.

„[Mes norėjome, kad žmonės galėtų] patys įvertinti, kas vyksta aikštėje“, – sakė Devine'as. „Taigi jie gali turėti savo įžvalgas, o ne tik komentatoriaus sukurtas įžvalgas. Jie turi daugiau informacijos. Jie gali pasakyti: „Oho, Federeris šį vakarą tikrai trenkia atgal“. Be „Action Audio“ jie negalėtų to suprasti. nes niekas jiems nesako „tai yra ranka“ arba „tai yra forhend“. Tačiau tai galite padaryti labai lengvai naudodami abstrakčią garsą. signalai“.

Ši technologija veikia naudojant 3D erdvinius duomenis iš didelės spartos kameros / kompiuterinės regos sistemos, vadinamos Vanago akis, kuris seka kamuoliuko padėtį realiu laiku, kad būtų galima skambinti elektroninėmis linijomis taškų skaičiavimo tikslais. Tada ši informacija paverčiama 3D garsu, paverčiant veiksmus individualiais garso signalais, o taip pat perkeliama ten, kur garsas sklinda iš tam, kad sirgaliai galėtų pajusti, kur yra kamuolys momentas. "Mes dekonstruojame sportą, kad atkurtume jį kaip garsą", - sakė Devine'as.

Jis pažymėjo, kad projektas buvo įkvėptas neuromokslininko Davido Eaglemano jutimo pakeitimo technologijos. Eagleman, kuris Skaitmeninės tendencijos, apklaustos praėjusiais metais, jau seniai tyrinėjo jutimo pakeitimą, kuris gali, pavyzdžiui, užfiksuoti garsą ir paversti jį vibraciniais raštais ant nešiojamos liemenės ar apyrankės. Tai gali būti naudojama tam, kad kurčias žmogus suprastų, ką jis sako kalbėdamas.

„Jei pagalvoji, kiekvienas signalas, ateinantis į kūną, nesvarbu, kokia tai prasmė, yra abstraktus, tiesa? Devine pasakė. „Mes tiesiog mokomės iššifruoti tą signalą. Taigi nėra jokios priežasties, kodėl negalime sukurti – [ir išmokti suprasti] – abstraktaus signalo, sklindančio per garso kanalą.

Už Australian Open

Australijos atvirajame turnyre „Action Audio“ buvo transliuojamas kaip televizijos garso kanalas. Garso signalai, kurių buvo galima klausytis atskirai arba su garso komentarais, siūlo garsus, skirtus rankoms ir atgal, kartu su kitais, rodančiais, kaip arti kamuoliuko yra linijos. Devine'as teigė, kad ateityje yra galimybių tai išplėsti – lygiai taip pat, kaip bet kokia šnekamoji kalba gali būti naudojama paprastiems ketinimams perduoti, taip pat kur kas išsamesniems stebėjimams. Ateityje vartotojai netgi galės pritaikyti sistemą patys, arba pakeisdami konkrečius garso signalus arba, galbūt, pridėti arba pašalinti detales, atsižvelgiant į tai, ką jie nori matyti paryškintas. Galimybės yra neribotos.

Devine'as pripažino, kad tai yra sudėtingas darbas ne tik technologiškai, bet ir užtikrinant, kad jie pagerintų žiūrėjimo patirtį, o ne ją sumažintų. „Klausa akliesiems ar silpnaregiams yra labai prasmingas ir brangus pojūtis“, – pažymėjo jis. Kitoje interviu vietoje jis tvirtino, kad komanda „bando sumažinti pažinimo krūvį“ vartotojams.

Pademonstravę šią technologiją, dabar jie tikisi ją išplėsti ir aprėpti kitus teniso turnyrus, tokius kaip Vimbldonas (kuris jau naudoja įspūdingą A.I. tech), „French Open“ ir „US Open“. Jie taip pat tiki, kad gali plėstis ir į kitas sporto šakas – nors tai iškels naujų iššūkių.

"Tenisas iš tikrųjų yra tikrai geras veiksmo garso pavyzdys, nes jis yra dinamiškas", - sakė Devine'as. „Ji turi sustojimo akimirkų ir visiško veiksmo akimirkų, kai visi tyli. Tačiau kiekviena sporto šaka yra visiškai kitokia. Kaip galėtume pritaikyti banglenčių sportą? Kaip suteikti žmonėms jausmą, ką daro banglentininkas? Ką identifikuojame? O kaip kelių žaidėjų renginiai, tokie kaip krepšinis? Kaip sužinoti, kokią informaciją norėtų išgirsti aklas ar silpnaregis? Čia veiks kodo projektavimo procesas.

Dar reikia nuveikti, bet tai tikrai daug žadanti pradžia.