Az Action Audio sportközvetítései olyanok, mint a Braille-írás

THWOK. Ponk. Thwok. Ponk. THWOK. PONK. Thwok. Az ujjongás fokozódik. Ponk. THWOK. A tornacipők nyikorgása az aszfalton. PONK. Szünet. Lelkes taps.

Felismerni? Természetesen nem. Valójában Roger Federeré.lehetetlen lövés” Andre Agassi ellen a 2005-ös dubai teniszbajnokság negyeddöntőjében. Körülbelül olyan tökéletes pillanata a tenisznek, mint amilyennek az ember szemtanúja lehet, és érthetetlenné teszi az a tény, hogy itt absztrakt hangzásképként reprodukálják.

Amilyen könnyen követhető a tenisz vizuálisan, hangzási szinten, olyan nehéz követni, mint egy epizód Twin Peaks félúton bekapcsoltad. Ez egy kihívás a Tennis Australia, az AKQA digitális tervezési és kommunikációs ügynökség mérnökei számára, és az ausztráliai Melbourne-i Monash Egyetem a megoldáson dolgoznak az Action nevű megoldáson Hang. Ez egy online hangfolyam, amelyet a múlt havi Australian Open közvetítésekhez fejlesztettek ki, hogy segítse a Világszerte 285 millió ember – akik közül sokan teniszrajongó – él vaksággal vagy látással értékvesztés.

„Könnyű módja annak megértésének, hogy… ismeri a hangos leírásokat?” Tim Devine, az AKQA ügyvezető kreatív igazgatója elmondta a Digital Trendsnek. „Sok vak és gyengénlátó ember használja őket. Ez a hangos leírások egyfajta absztrakt változata, hogy az emberek több információt kapjanak arról, hogy mi történik [a pályán].”

Tehát alapvetően kommentár?

Természetesen van egyfajta hangleírás, amely évek óta létezik a sportban – és ez ugyanaz amely lehetővé teszi a sportrajongók számára, hogy sportot hallgathassanak a rádióban, ahol a képek nem éppen bőségesek kínálat. De a szakértők audiokommentárja nem ugyanaz, mint egy meccset nézni, és saját következtetésekre jutni. Az ötlet a Akció hang az, hogy képeket készítsen a bíróságon zajló cselekményekről, majd ezeket feltűnésmentes akciójelekké alakítsa nyelv – különböző hangokkal illusztrálja a kézfejeket, a hátralövéseket, a körmönfont közeli felvételeket és több.

"[Azt akartuk, hogy az emberek képesek legyenek] saját véleményt alkotni arról, hogy mi történik a pályán" - mondta Devine. „Így saját belátásaik lehetnek ahelyett, hogy csak egy kommentátor hozná létre a meglátásokat. Több információjuk van. Képesek kimondani: „Hűha, Federer ma este nagyon megüti a fonákot.” Az Action Audio nélkül nem rendelkezhetnének ezzel a belátással. mert senki nem mondja nekik, hogy „ez egy fonák” vagy „ez egy kézfej”. De ezt nagyon könnyen megteheti absztrakt hanggal. jeleket.”

A technológia az ún. Hawk-Eye, amely valós időben követi a labda helyzetét a pontozási célú elektronikus vonalhívásokhoz. Ezt az információt ezután 3D hanggá alakítják, a cselekvéseket egyedi hangjelzésekké alakítva, miközben a úgy tűnik, hogy a hang onnan jön, hogy a szurkolók érzékeljék, hol van a labda a pályán egy adott helyen pillanat. „Dekonstruáljuk a sportot, hogy hangként rekonstruáljuk” – mondta Devine.

Megjegyezte, hogy a projektet David Eagleman idegtudós szenzoros helyettesítési technológiája ihlette. Eagleman, aki A Digital Trends tavaly interjút készített, régóta kutatja az érzékszervi szubsztitúciót, amely képes például hangot rögzíteni és vibrációs mintázattá alakítani egy viselhető mellényen vagy csuklópánton. Ez felhasználható arra, hogy a siket személy megértse, mit mond, amikor beszél.

"Ha belegondolsz, minden jel, ami a testbe érkezik, függetlenül attól, hogy milyen értelemben, elvont, igaz?" – mondta Devine. „Csak megtanuljuk dekódolni ezt a jelet. Nincs okunk tehát arra, hogy miért ne tudnánk létrehozni – [és megtanulni megérteni] – egy absztrakt jelet, amely egy audiocsatornán keresztül érkezik.”

Az Australian Openen túl

Az Australian Openen az Action Audio televíziós hangcsatornaként volt elérhető az adás részeként. A hangjelzések, amelyeket elkülönülten vagy hangkommentárral hallgathattak, hangokat kínáltak a kézi kézhez és a hátrakézhez, valamint más hangokat, amelyek jelezték, milyen közel van a labda a vonalhoz. Devine azt mondta, hogy a jövőben lehetőség nyílik ennek kiterjesztésére – ugyanúgy, ahogy bármely beszélt nyelv használható egyszerű szándékok, valamint sokkal részletesebb megfigyelések közlésére. A jövőben akár arra is lehetőség nyílik, hogy a felhasználók saját maguk testre szabják a rendszert, akár megváltoztatják a adott hangjelzések, esetleg részletek hozzáadása vagy eltávolítása attól függően, hogy mit szeretnének látni kiemelt. A lehetőségek végtelenek.

Devine elismerte, hogy ez egy kihívásokkal teli feladat, nem csak technológiailag, hanem abból a szempontból is, hogy javítják a megtekintési élményt, nem pedig rontják azt. „A vakok vagy gyengénlátók hallása nagyon jelentőségteljes és értékes érzék” – jegyezte meg. Az interjú más részében azt állította, hogy a csapat „igyekszik csökkenteni a felhasználók kognitív terhelését”.

Miután bemutatták a technológiát, most azt remélik, hogy kiterjesztik más teniszversenyekre is, például Wimbledonra (ami már használ néhány lenyűgöző A.I. tech), a French Openen és a US Openen. Azt is hiszik, hogy más sportágakra is terjeszkedhetnek – bár ez új kihívásokat vet fel.

„A tenisz valójában egy nagyon jó példa az akcióhangzásra, mert dinamikus” – mondta Devine. „Vannak a megállás pillanatai, és a teljes cselekvés pillanatai, amikor mindenki csendben van. De minden sport egészen más. Hogyan hangosíthatnánk a szörfözést? Hogyan adhatjuk meg az embereknek, hogy mit csinál egy szörfös? Mit azonosítunk? Mit szólnál a többszereplős eseményekhez, például a kosárlabdához? Honnan tudhatjuk, hogy egy vak vagy gyengénlátó személy milyen információkat szeretne hallani? Itt fog működni egy kódtervezési folyamat.”

Van még tennivaló, de ezek minden bizonnyal ígéretes kezdetek.