Akčný zvuk
THWOK. Ponk. Thwok. Ponk. THWOK. PONK. Thwok. Fandenie sa zintenzívňuje. Ponk. THWOK. Vŕzganie tenisiek na asfalte. PONK. Pauza. Nadšený potlesk.
Obsah
- Takže v podstate komentár?
- Okrem Australian Open
Poznáte to? Samozrejme, že nie. V skutočnosti ide o Rogera Federeranemožný výstrel“ proti Andremu Agassimu vo štvrťfinále tenisových majstrovstiev v Dubaji v roku 2005. Je to asi taký dokonalý tenisový moment, aký by sa len mohol stať svedkom, ktorý je nezrozumiteľný vďaka skutočnosti, že je tu reprodukovaný ako abstraktná zvuková scéna.
Odporúčané videá
Nasledovanie tenisu je tak jednoduché, ako je vizuálne, na zvukovej úrovni je rovnako ťažké sledovať ako epizódu Twin Peaks v polovici ste sa zapli. To je výzva inžinierov z Tennis Australia, agentúry pre digitálny dizajn a komunikáciu AKQA, a Monash University v Melbourne v Austrálii pracujú na riešení pomocou niečoho, čo sa nazýva Action Zvuk. Ide o online audio stream, ktorý bol vyvinutý pre minulomesačné vysielanie Australian Open, aby pomohol 285 miliónov ľudí na celom svete – z ktorých mnohí sú tenisovými fanúšikmi – žije so slepotou alebo zrakom oslabenie.
"Jednoduchý spôsob, ako tomu porozumieť, je... poznáte zvukové popisy?" Tim Devine, výkonný kreatívny riaditeľ AKQA, povedal pre Digital Trends. „Používa ich veľa nevidomých a slabozrakých ľudí. Toto je druh abstraktnej verzie zvukových popisov, ktoré ľuďom poskytujú viac informácií o tom, čo sa deje [na kurte].“
Takže v podstate komentár?
Existuje, samozrejme, druh zvukového popisu, ktorý v športe existuje už roky – a je rovnaký taký, ktorý umožňuje športovým fanúšikom počúvať šport v rádiu, kde nie je veľa obrázkov zásobovanie. Zvukový komentár od odborníkov však nie je to isté ako možnosť sledovať hru a dospieť k vlastným záverom. Myšlienka na Akčný zvuk je nasnímať akcie na súde a potom ich premeniť na nenápadný akčný signál jazyk — s rôznymi zvukmi na ilustráciu forhendov, bekhendov, úderov zblízka a viac.
„[Chceli sme, aby si ľudia mohli] urobiť vlastné hodnotenie toho, čo sa deje na ihrisku,“ povedal Devine. „Takže môžu mať svoje vlastné postrehy, a nie len postrehy vytvorené komentátorom. Majú viac informácií. Sú schopní povedať: ‚Wow, Federer dnes večer naozaj bije do bekhendu.‘ Bez Action Audio by nemohli mať taký prehľad pretože im nikto nepovie „to je bekhend“ alebo „to je forhend“. Môžete to však urobiť veľmi jednoducho pomocou abstraktného zvuku signály."
Akčný zvuk – ukážka
Technológia funguje tak, že využíva 3D priestorové dáta z vysokorýchlostného kamerového/počítačového systému videnia tzv Hawk-Eye, ktorá sleduje polohu lopty v reálnom čase pre elektronické volania na linku na účely bodovania. Tieto informácie sa potom transformujú do 3D zvuku, čím sa akcie premenia na jednotlivé zvukové podnety a zároveň sa posunú tam, kde je to možné Zdá sa, že zvuk prichádza, aby umožnil fanúšikom získať predstavu o tom, kde sa lopta v ktoromkoľvek konkrétnom prípade nachádza na ihrisku moment. „Šport dekonštruujeme, aby sme ho zrekonštruovali ako zvuk,“ povedal Devine.
Poznamenal, že projekt bol inšpirovaný technológiou senzorickej substitúcie neurovedca Davida Eaglemana. Eagleman, ktorý Digitálne trendy rozhovor minulý rok, dlho skúmala senzorickú substitúciu, ktorá je schopná napríklad zachytiť zvuk a premeniť ho na vibračné vzory na nositeľnej veste alebo náramku. To by sa mohlo použiť na to, aby nepočujúci mohol pochopiť, čo človek hovorí, keď hovorí.
"Ak sa nad tým zamyslíte, každý signál, ktorý prichádza do tela, bez ohľadu na to, aký zmysel má, je abstraktný, však?" povedal Devine. "Len sa učíme dekódovať ten signál." Nie je teda dôvod, prečo by sme nemohli vytvoriť – [a naučiť sa rozumieť] – abstraktný signál, ktorý prichádza cez zvukový kanál.“
Okrem Australian Open
Pre Australian Open bol Action Audio dostupný ako televízny zvukový kanál ako súčasť vysielania. Zvukové narážky, ktoré bolo možné počúvať samostatne alebo so zvukovým komentárom, ponúkali zvuky pre forhend a bekhend, spolu s ďalšími, ktoré naznačovali, ako blízko je lopta pri čiare. Devine povedal, že v budúcnosti existujú príležitosti na rozšírenie tohto - rovnakým spôsobom, akým sa dá akýkoľvek hovorený jazyk použiť na komunikáciu jednoduchých zámerov, ako aj na oveľa podrobnejšie pozorovania. V budúcnosti môže byť dokonca možné, aby si používatelia systém prispôsobili pre seba, a to buď zmenou špecifické zvukové podnety alebo prípadne pridanie alebo odstránenie detailov v závislosti od toho, čo chcú vidieť zvýraznené. Možnosti sú nekonečné.
Devine uznal, že ide o náročnú prácu, a to nielen technologicky, ale aj pri zabezpečovaní toho, aby zlepšili zážitok zo sledovania a nezhoršili ho. „Počuť pre nevidomého alebo slabozrakého človeka je veľmi zmysluplný a vzácny zmysel,“ poznamenal. Na inom mieste v rozhovore tvrdil, že tím sa „snaží znížiť kognitívnu záťaž“ používateľov.
Po predvedení technológie teraz dúfajú, že ju rozšíria na pokrytie iných tenisových turnajov, ako je Wimbledon (ktorý už používa niektoré pôsobivé A.I. tech), French Open a US Open. Veria tiež, že sa môžu rozšíriť aj na iné športy – hoci to prinesie nové výzvy.
„Tenis je skutočne dobrým príkladom akčného zvuku, pretože je dynamický,“ povedal Devine. „Má chvíle zastavenia a chvíle plnej akcie, kde sú všetci ticho. Ale každý šport je úplne iný. Ako by sme mohli ozvučiť surfovanie? Ako dáme ľuďom predstavu o tom, čo robí surfer? Čo identifikujeme? Čo poviete na multiplayerové akcie ako basketbal? Ako vieme, aké informácie by chcel počuť niekto, kto je nevidiaci alebo slabozraký? Tam bude fungovať proces kodesignu.“
Je pred nami ešte veľa práce, ale toto sú určite sľubné začiatky.