Sportski prijenosi Action Audio-a su poput Brailleovog pisma za vaše uši

Akcijski audio

THWOK. Ponk. Thwok. Ponk. THWOK. PONK. Thwok. Navijanje se pojačava. Ponk. THWOK. Škripa patika po asfaltu. PONK. Pauza. Oduševljeni pljesak.

Sadržaj

  • Dakle, komentar, u osnovi?
  • Iza Australian Opena

Prepoznajete li ga? Naravno da nemate. To je zapravo "Roger Federer"nemoguć hitac” protiv Andre Agassija u četvrtfinalu Dubai Tennis Championshipsa 2005. To je savršen trenutak tenisa kakvom se čovjek može nadati da će mu svjedočiti, a koji je nerazumljiv zbog činjenice da je ovdje reproduciran kao apstraktna zvučna kulisa.

Preporučeni videozapisi

Koliko god je tenis lako pratiti vizualno, na razini zvuka, jednako ga je teško pratiti kao epizodu Twin Peaks uključili ste se na pola puta. To je izazov inženjera iz Tennis Australia, agencije za digitalni dizajn i komunikacije AKQA, i Sveučilište Monash u Melbourneu, Australija rade na rješavanju s nečim što se zove Akcija Audio. To je online audio stream koji je razvijen za prošlomjesečne prijenose Australian Opena kako bi pomogao 285 milijuna ljudi u svijetu - od kojih su mnogi ljubitelji tenisa - živi sa sljepoćom ili vidom oštećenje.

"Jednostavan način da to shvatite je... jeste li upoznati s audio opisima?" Tim Devine, izvršni kreativni direktor AKQA-e, rekao je za Digital Trends. “Puno ih slijepih i slabovidnih ljudi koristi. Ovo je vrsta apstraktne verzije audio opisa kako bi se ljudima dalo više informacija o tome što se događa [na terenu]."

Dakle, komentar, u osnovi?

Postoji, naravno, neka vrsta zvučnog opisa koji godinama postoji u sportu - i isti je onaj koji ljubiteljima sporta omogućuje slušanje sporta na radiju, gdje slika baš i nije u izobilju Opskrba. Ali audio komentari stručnjaka nisu isto što i gledati utakmicu i doći do vlastitih zaključaka. Ideja o Akcijski audio je snimanje slika radnji na terenu, a zatim ih pretvoriti u nenametljiv znak akcije jezik — s različitim zvukovima za ilustraciju forhenda, bekenda, udaraca izbliza koji grizu nokte i više.

"[Htjeli smo da ljudi mogu] sami procijeniti ono što se događa na terenu", rekao je Devine. “Tako da mogu imati vlastite uvide, a ne samo uvide koje je stvorio komentator. Imaju više informacija. Oni mogu reći, 'vau, Federer stvarno udara backhand večeras.' Bez Action Audioa, ne bi mogli imati taj uvid jer im nitko ne govori 'to je backhand' ili 'to je forehand'. Ali to možete vrlo lako učiniti s apstraktnim zvukom signali."

Akcijski audio - uzorak

Tehnologija funkcionira korištenjem 3D prostornih podataka iz brze kamere/sustava računalnog vida tzv Sokolovo Oko, koji prati položaj lopte u stvarnom vremenu za elektroničko pozivanje linije u svrhu bodovanja. Te se informacije zatim transformiraju u 3D audio, pretvarajući radnje u pojedinačne zvučne znakove, dok se također pomiču Čini se da zvuk dolazi kako bi navijačima omogućili da steknu osjećaj gdje je lopta na terenu u bilo kojem trenutku trenutak. "Dekonstruiramo sport kako bismo ga rekonstruirali kao zvuk", rekao je Devine.

Napomenuo je da je projekt inspiriran tehnologijom senzorne supstitucije neuroznanstvenika Davida Eaglemana. Eagleman, koji Digital Trends intervjuirao prošle godine, dugo je istraživao senzornu zamjenu koja može, na primjer, uhvatiti zvuk i pretvoriti ga u vibracijske uzorke na nosivom prsluku ili narukvici. To se može koristiti kako bi se omogućilo gluhoj osobi da razumije što osoba govori dok govori.

“Ako bolje razmislite, svaki signal koji dolazi u tijelo, bez obzira o kojem se osjetilu radi, apstraktan je, zar ne?” rekao je Devine. “Samo učimo dekodirati taj signal. Dakle, nema razloga zašto ne bismo mogli stvoriti — [i naučiti razumjeti] — apstraktni signal koji dolazi kroz audio kanal.”

Iza Australian Opena

Za Australian Open, Action Audio je bio dostupan kao televizijski audio kanal kao dio prijenosa. Audio signali, koji su se mogli slušati zasebno ili uz audio komentare, nudili su zvukove za forehand i backhand, zajedno s ostalima koji pokazuju koliko je lopta blizu crte. Devine je rekao da u budućnosti postoje mogućnosti da se to proširi - na isti način na koji se svaki govorni jezik može koristiti za komuniciranje jednostavnih namjera, kao i daleko detaljnijih opažanja. U budućnosti bi čak moglo biti moguće da korisnici sami prilagode sustav, bilo promjenom određene audio signale ili, potencijalno, dodavanje ili uklanjanje detalja ovisno o tome što žele vidjeti istaknuto. Mogućnosti su beskrajne.

Devine je priznao da je ovo izazovan posao, ne samo tehnološki, već i u smislu osiguravanja da poboljšavaju iskustvo gledanja, a ne da ga umanjuju. "Sluh za slijepu ili slabovidnu osobu vrlo je značajan i dragocjen osjet", istaknuo je. Na drugom mjestu u intervjuu, ustvrdio je da tim "pokušava smanjiti kognitivno opterećenje" korisnika.

Nakon što su demonstrirali tehnologiju, sada se nadaju da će je proširiti na pokrivanje drugih teniskih turnira kao što je Wimbledon (koji već koristi neke impresivne A.I. tehn), French Open i US Open. Također vjeruju da se mogu proširiti i na druge sportove — iako će to dovesti do novih izazova.

"Tenis je zapravo jako dobar primjer akcijskog zvuka jer je dinamičan", rekao je Devine. “Ima trenutaka zaustavljanja i trenutaka pune akcije u kojima su svi tihi. Ali svaki sport je sasvim drugačiji. Kako bismo mogli sonificirati surfanje? Kako ljudima dati dojam o tome što surfer radi? Što identificiramo? Što kažete na događaje za više igrača poput košarke? Kako znamo koje informacije bi želio čuti netko tko je slijep ili slabovidan? Tu će funkcionirati proces kodiranja."

Ima još posla, ali ovo su svakako obećavajući počeci.