Akční zvuk
THWOK. Ponk. Thwok. Ponk. THWOK. PONK. Thwok. Fandění zesílí. Ponk. THWOK. Vrzání tenisek na asfaltu. PONK. Pauza. Nadšený potlesk.
Obsah
- Takže v podstatě komentář?
- Mimo Australian Open
Poznáte to? Samozřejmě, že ne. Ve skutečnosti jde o Rogera Federeranemožný výstřel“ proti Andre Agassimu ve čtvrtfinále turnaje Dubai Tennis Championships 2005. Je to asi tak dokonalý okamžik tenisu, jak jen by se dalo doufat, že bude svědkem, který je nesrozumitelný díky skutečnosti, že je zde reprodukován jako abstraktní zvuková scéna.
Doporučená videa
Stejně snadné, jako je tenis vizuálně, na úrovni zvuku, je stejně těžké sledovat jako epizodu Twin Peaks jste v polovině zapnuli. To je výzva inženýrů z Tennis Australia, digitální designové a komunikační agentury AKQA, a Monash University v Melbourne v Austrálii pracují na řešení pomocí něčeho, co se nazývá Action Zvuk. Je to online audio stream, který byl vyvinut pro přenosy z Australian Open minulý měsíc, aby pomohl 285 milionů lidí na celém světě – z nichž mnozí jsou tenisovými fanoušky – žije se slepotou nebo zrakem poškození.
"Snadný způsob, jak tomu porozumět, je... znáte zvukové popisy?" Tim Devine, výkonný kreativní ředitel AKQA, řekl Digital Trends. „Používá je spousta nevidomých a slabozrakých. Toto je druh abstraktní verze zvukových popisů, které lidem poskytují více informací o tom, co se děje [na kurtu].“
Takže v podstatě komentář?
Samozřejmě existuje druh zvukového popisu, který ve sportu existuje již léta – a je stejný takový, který umožňuje sportovním fanouškům poslouchat sport v rádiu, kde není obrazů zrovna dostatek zásobování. Zvukový komentář od vědců však není totéž jako možnost sledovat hru a dospět k vlastním závěrům. Myšlenka na Akční zvuk je pořizovat snímky akcí na kurtu a poté je přeměnit na nenápadnou akční nápovědu jazyk — s různými zvuky pro ilustraci forhendů, bekhendů, kousavě blízkých střel a více.
„[Chtěli jsme, aby si lidé mohli] udělat vlastní hodnocení toho, co se děje na kurtu,“ řekl Devine. „Takže mohou mít své vlastní postřehy, spíše než jen postřehy vytvořené komentátorem. Mají více informací. Jsou schopni říct: ‚Wow, Federer dnes večer opravdu tluče do bekhendu.‘ Bez Action Audio by nemohli mít takový náhled protože jim nikdo neříká ‚to je bekhend‘ nebo ‚to je forhend‘. Ale můžete to udělat velmi snadno s abstraktním zvukem signály."
Akční zvuk – ukázka
Technologie funguje pomocí 3D prostorových dat z vysokorychlostního systému kamer/počítačového vidění tzv Hawk-Eye, který sleduje polohu míče v reálném čase pro elektronické volání na linku pro účely bodování. Tyto informace jsou pak transformovány do 3D zvuku, čímž se akce mění na jednotlivé zvukové podněty a zároveň se posouvají tam, kde je Zdá se, že zvuk přichází, aby umožnil fanouškům získat představu o tom, kde je míč na hřišti v kterémkoli konkrétním případě moment. "Sport dekonstruujeme, abychom ho rekonstruovali jako zvuk," řekl Devine.
Poznamenal, že projekt byl inspirován technologií senzorické substituce neurologa Davida Eaglemana. Eagleman, kdo Digitální trendy rozhovor v loňském roce, dlouho zkoumala smyslovou substituci, která je schopna například zachytit zvuk a přeměnit jej na vibrační vzory na nositelné vestě nebo náramku. To by mohlo být použito k tomu, aby neslyšící člověk porozuměl tomu, co člověk říká, když mluví.
"Když se nad tím zamyslíte, každý signál, který přichází do těla, bez ohledu na to, jaký smysl má, je abstraktní, že?" řekl Devine. "Prostě se učíme dekódovat ten signál." Není tedy důvod, proč bychom nemohli vytvořit – [a naučit se rozumět] – abstraktní signál, který přichází prostřednictvím zvukového kanálu.“
Mimo Australian Open
Pro Australian Open byl Action Audio k dispozici jako televizní zvukový kanál jako součást vysílání. Zvukové narážky, které bylo možné poslouchat samostatně nebo se zvukovým komentářem, nabízely zvuky pro forhend a bekhend, spolu s dalšími, které naznačovaly, jak blízko je míč k čáře. Devine řekl, že v budoucnu existují příležitosti, jak to rozšířit - stejným způsobem, jakým lze jakýkoli mluvený jazyk použít ke sdělení jednoduchých záměrů, stejně jako mnohem podrobnějších pozorování. V budoucnu může být dokonce možné, aby si uživatelé systém přizpůsobili sami, a to buď změnou konkrétní zvukové podněty nebo případně přidání nebo odebrání detailů v závislosti na tom, co chtějí vidět zvýrazněno. Možnosti jsou nekonečné.
Devine uznal, že se jedná o náročnou práci, nejen technologicky, ale také při zajišťování toho, že zlepšují zážitek ze sledování, nikoli jej zhoršují. „Slyšení pro nevidomého nebo slabozrakého je velmi smysluplný a vzácný smysl,“ poznamenal. Jinde v rozhovoru tvrdil, že se tým „snaží snížit kognitivní zátěž“ uživatelů.
Po demonstraci technologie nyní doufají, že ji rozšíří na pokrytí dalších tenisových turnajů, jako je Wimbledon (který již používá některé působivé A.I. tech), French Open a US Open. Věří také, že se mohou rozšířit i do jiných sportů – i když to přinese nové výzvy.
„Tenis je skutečně dobrým příkladem akčního zvuku, protože je dynamický,“ řekl Devine. „Má okamžiky zastavení a okamžiky plné akce, kdy jsou všichni zticha. Ale každý sport je úplně jiný. Jak bychom mohli sonifikovat surfování? Jak dáme lidem představu o tom, co surfař dělá? Co identifikujeme? Co takhle multiplayerové akce jako basketbal? Jak víme, jaké informace by chtěl slyšet někdo, kdo je nevidomý nebo slabozraký? Tam bude fungovat proces kodesignu.“
Je potřeba udělat ještě hodně práce, ale tohle jsou jistě slibné začátky.
