Спортске емисије Ацтион Аудио-а су као Брајево писмо за ваше уши

ТХВОК. Понк. Тхвок. Понк. ТХВОК. ПОНК. Тхвок. Навијање се појачава. Понк. ТХВОК. Шкрипа патика по асфалту. ПОНК. Пауза. Ентузијастичан аплауз.

Препознати то? Наравно да не. То је, у ствари, Роџера Федерера “немогући пуцањ” против Андре Агасија у четвртфиналу тениског првенства Дубаија 2005. То је отприлике савршен тренутак тениса каквом се може надати да ће бити сведочанство, а чини га неразумљивим чињеницом да је овде репродукован као апстрактни звучни пејзаж.

Колико је лако пратити тенис визуелно, на нивоу аудио пејзажа, тешко га је пратити као епизоду Твин Пеакс укључили сте се на пола пута. То је изазов инжењерима из Теннис Аустралиа, агенције за дигитални дизајн и комуникације АККА, и Универзитет Монасх у Мелбурну, Аустралија, раде на решавању нечим што се зове Акција Аудио. То је онлајн аудио стреам који је развијен за прошломесечне преносе Аустралијан опена да би помогао 285 милиона људи широм света — од којих су многи љубитељи тениса — живе са слепилом или видом погоршање.

„Једноставан начин да се то разуме је... да ли сте упознати са аудио описима?“ Тим Девине, извршни креативни директор АККА-е, рекао је за Дигитал Трендс. „Много слепих и слабовидних људи их користи. Ово је нека апстрактна верзија аудио описа како би се људима дало више информација о томе шта се дешава [на терену].“

Дакле, коментар, у суштини?

Постоји, наравно, врста аудио описа који постоји у спорту годинама - и то је исто онај који омогућава љубитељима спорта да слушају спорт на радију, где слика није баш у изобиљу снабдевање. Али аудио коментари стручњака нису исто што и могућност да гледате утакмицу и доносите сопствене закључке. Идеја о Ацтион Аудио је снимити слике радњи на терену, а затим их претворити у ненаметљив акциони знак језик — различитим звуцима за илустрацију форхенда, бекхенда, удараца изблиза и више.

„[Желели смо да људи могу] да дају сопствену процену онога што се дешава на терену“, рекао је Девине. „Дакле, они могу да имају сопствене увиде, а не само да имају увиде које ствара коментатор. Имају више информација. Они су у стању да кажу, 'вау, Федерер стварно удара бекхенд вечерас.' Без Ацтион Аудио-а, не би могли да имају тај увид јер им нико не говори „то је бекхенд“ или „то је форхенд“. Али то можете врло лако да урадите са апстрактним звуком. сигнали.”

Технологија функционише коришћењем 3Д просторних података из система велике брзине камера/компјутерски вид, тзв Хавк-Еие, који прати позицију лопте у реалном времену за електронско позивање линије у сврху бодовања. Ове информације се затим трансформишу у 3Д аудио, претварајући радње у појединачне звучне знакове, а такође се померају где изгледа да звук долази како би се омогућило навијачима да стекну осећај где се лопта налази на терену у било ком одређеном момент. „Деконструишемо спорт да бисмо га реконструисали као звук“, рекао је Девине.

Напоменуо је да је пројекат инспирисан технологијом сензорне супституције неуронаучника Давида Еаглемана. Еаглеман, који Дигитални трендови интервјуисани прошле године, дуго је истраживао сензорну супституцију која је у стању да, на пример, ухвати звук и претвори га у вибрационе шаре на прслуку или наруквици за ношење. Ово би се могло користити да би се омогућило глувој особи да разуме шта особа говори када говори.

"Ако размислите о томе, сваки сигнал који дође у тело, без обзира на то какво је то чуло, је апстрактан, зар не?" Девине је рекао. „Само научимо да декодирамо тај сигнал. Дакле, нема разлога зашто не можемо да створимо - [и научимо да разумемо] - апстрактни сигнал који долази преко аудио канала."

Поред Аустралијан опена

За Аустралиан Опен, Ацтион Аудио је био доступан као телевизијски аудио канал као део емитовања. Аудио сигнали, који су могли да се слушају изоловано или уз аудио коментар, нудили су звукове за форхенд и бекхенд, заједно са осталима да би показали колико је лопта близу линије. Девине је рекао да у будућности постоје могућности да се ово прошири - на исти начин на који се било који говорни језик може користити за преношење једноставних намера, као и далеко детаљнија запажања. У будућности ће можда бити могуће да корисници прилагоде систем за себе, било да мењају специфичне аудио сигнале или, потенцијално, додавање или уклањање детаља у зависности од тога шта желе да виде истакнуто. Могућности су бесконачне.

Девине је признао да је ово изазован посао, не само технолошки, већ и да се осигура да они побољшавају искуство гледања, а не да га умањују. „Слушање за слепу или слабовидну особу је веома значајно и драгоцено чуло“, приметио је он. На другом месту у интервјуу, он је тврдио да тим „покушава да смањи когнитивно оптерећење“ корисника.

Пошто су демонстрирали технологију, сада се надају да ће је проширити на покривање других тениских турнира као што је Вимблдон (који већ користи неке импресивне А.И. тецх), Отворено првенство Француске и Отворено првенство САД. Такође верују да се могу проширити и на друге спортове — иако ће то довести до нових изазова.

„Тенис је заправо заиста добар пример акционог звука, јер је динамичан“, рекао је Девине. „Има тренутке заустављања и тренутке пуне акције у којима су сви тихи. Али сваки спорт је сасвим другачији. Како можемо сонифицирати сурфовање? Како да дамо људима осећај шта сурфер ради? Шта идентификујемо? Шта кажете на догађаје за више играча као што је кошарка? Како да знамо које информације би неко ко је слеп или слабовид желео да чује? Ту ће функционисати процес кодизајна."

Има још посла, али ово су свакако обећавајући почеци.