Action Audio
THWOK. Ponk. Thwok. Ponk. THWOK. PONK. Thwok. Rõõmustamine tugevneb. Ponk. THWOK. Tossude kriuksum asfaldil. PONK. Paus. Entusiastlik aplaus.
Sisu
- Põhimõtteliselt siis kommentaar?
- Peale Austraalia lahtiste
Kas tunnete ära? Muidugi mitte. See on tegelikult Roger Federeri "võimatu löök” 2005. aasta Dubai tennisemeistrivõistluste veerandfinaalis Andre Agassi vastu. See on umbes sama täiuslik tennisehetk, mille tunnistajaks võiks loota olla, mille muudab arusaamatuks asjaolu, et see on siin abstraktse helipildina reprodutseeritud.
Soovitatud videod
Sama lihtne jälgida kui tennist on visuaalselt, audiomaastiku tasandil, sama raske jälgida kui episoodi Twin Peaks olete poole peal sisse lülitanud. See on väljakutse Tennis Australia, digitaalse disaini ja kommunikatsiooniagentuuri AKQA inseneridele, ja Monashi ülikool Melbourne'is, Austraalias, töötavad selle nimel, et lahendada midagi nimega Action Heli. See on veebipõhine helivoog, mis töötati välja eelmise kuu Austraalia lahtiste ülekannete jaoks, et aidata Maailmas elab 285 miljonit inimest, kellest paljud on tennisefännid, kes on pimedad või nägemishäired kahjustus.
"Lihtne viis sellest aru saada on … kas olete audiokirjeldustega tuttav?" Tim Devine, AKQA tegevloovjuht, rääkis Digital Trendsile. "Paljud pimedad ja vaegnägijad kasutavad neid. See on omamoodi helikirjelduste abstraktne versioon, et anda inimestele rohkem teavet [väljakul] toimuva kohta.
Põhimõtteliselt siis kommentaar?
Muidugi on olemas omamoodi helikirjeldus, mis on spordis eksisteerinud juba aastaid – ja see on sama mis võimaldab spordisõpradel raadiost sporti kuulata, kus pilte pole just palju pakkumine. Kuid asjatundjate helikommentaarid ei ole sama, mis mängu vaatamine ja oma järelduste tegemine. Mõte sellest Action Audio on teha pilte kohtus toimuvatest tegevustest ja seejärel muuta need märkamatuks tegevuseks keel – erinevate helidega, et illustreerida eeskäe-, tagakäe-, naelutavalt lähedalt tehtud võtteid ja rohkem.
"[Tahtsime, et inimesed saaksid] väljakul toimuvale oma hinnangu anda," ütles Devine. "Nii et neil võib olla oma arusaam, mitte ainult kommentaatori loodud arusaamad. Neil on rohkem teavet. Nad võivad öelda: "Vau, Federer lööb täna õhtul tõesti tagakäe." Ilma Action Audiota ei saaks nad seda ülevaadet sest keegi ei ütle neile "see on tagantkäe" või "see on eeskäe". Aga abstraktse heli abil saate seda väga lihtsalt teha signaalid."
Action Audio – näidis
Tehnoloogia töötab, kasutades 3D-ruumiandmeid kiire kaamera/arvuti nägemissüsteemist nn. Kullisilm, mis jälgib palli asukohta reaalajas elektroonilise liinikõne jaoks punktiarvestuse eesmärgil. See teave muudetakse seejärel 3D-heliks, muutes toimingud individuaalseteks helivihjeteks, nihutades samal ajal heli näib tulevat, et fännid saaksid aimu, kus pall konkreetsel väljakul asub hetk. "Me dekonstrueerime spordi, et rekonstrueerida see helina," ütles Devine.
Ta märkis, et projekt oli inspireeritud neuroteadlase David Eaglemani sensoorsest asendustehnoloogiast. Eagleman, kes Digital Trends intervjueeris eelmisel aastal, on juba pikka aega uurinud sensoorset asendust, mis suudab näiteks heli jäädvustada ja muuta selle kantaval vestil või randmepaelal vibreerivateks mustriteks. Seda saab kasutada selleks, et kurt saaks aru, mida inimene räägib, kui ta räägib.
"Kui järele mõelda, on iga kehasse saabuv signaal abstraktne, olenemata sellest, mis mõttes see on, eks?" ütles Devine. "Me lihtsalt õpime seda signaali dekodeerima. Seega pole põhjust, miks me ei saaks luua – [ja õppida mõistma] – abstraktset signaali, mis tuleb helikanali kaudu.
Peale Austraalia lahtiste
Australian Openi jaoks oli Action Audio ülekande osana saadaval televisiooni helikanalina. Helisignaalid, mida sai kuulata eraldi või helikommentaariga, pakkusid helisid eeskäe ja tagakäe jaoks, koos teistega, mis näitavad, kui lähedal pall joonele on. Devine ütles, et tulevikus on võimalusi seda laiendada - samamoodi nagu mis tahes kõnekeelt saab kasutada lihtsate kavatsuste ja ka palju üksikasjalikumate tähelepanekute edastamiseks. Tulevikus võib kasutajatel olla isegi võimalik süsteemi enda jaoks kohandada, muutes seda konkreetsed helivihjed või võimaluse korral detailide lisamine või eemaldamine olenevalt sellest, mida nad näha tahavad esile tõstetud. Võimalusi on lõputult.
Devine tunnistas, et see on väljakutseid pakkuv töö mitte ainult tehnoloogiliselt, vaid ka selleks, et tagada vaatamiskogemuse parandamine, mitte selle halvenemine. "Pimeda või vaegnägija jaoks on kuulmine väga tähendusrikas ja väärtuslik meel," märkis ta. Mujal intervjuus kinnitas ta, et meeskond "püüab vähendada kasutajate kognitiivset koormust".
Pärast tehnoloogia demonstreerimist loodavad nad nüüd laiendada seda ka teistele tenniseturniiridele, näiteks Wimbledonile (mis kasutab juba mõnda muljetavaldavat A.I. tehnika), French Open ja US Open. Samuti usuvad nad, et saavad laieneda ka teistele spordialadele – kuigi see tekitab uusi väljakutseid.
"Tennis on tegelikult hea näide action-helist, sest see on dünaamiline," ütles Devine. "Sellel on peatumishetki ja täistegevuse hetki, kus kõik on vaiksed. Kuid iga spordiala on täiesti erinev. Kuidas saaksime surfamist helindada? Kuidas anda inimestele aimu, mida surfar teeb? Mida me tuvastame? Kuidas on lood mitme mängijaga, näiteks korvpalliga? Kuidas me teame, millist teavet soovib keegi, kes on pime või vaegnägija, kuulda? See on koht, kus koodikujundusprotsess töötab.
Tööd on veel teha, kuid see on kindlasti paljutõotav algus.
