Siaran Olahraga Action Audio Seperti Braille Untuk Telinga Anda

THWOK. Ponk. Pukul. Ponk. THWOK. PONK. Pukul. Sorakan semakin intensif. Ponk. THWOK. Derit sepatu kets di aspal. PONK. Berhenti sebentar. Tepuk tangan meriah.

Mengenalinya? Tentu saja tidak. Faktanya, ini adalah "tembakan yang mustahil” melawan Andre Agassi di perempat final Kejuaraan Tenis Dubai 2005. Ini tentang momen tenis yang sempurna seperti yang diharapkan untuk disaksikan, dibuat tidak dapat dipahami oleh fakta bahwa itu direproduksi di sini sebagai lanskap suara abstrak.

Semudah mengikuti tenis secara visual, pada tingkat audioscape, mengikutinya sama sulitnya dengan sebuah episode Puncak kembar Anda telah mengaktifkan di tengah jalan. Itu adalah tantangan para insinyur dari Tennis Australia, agensi desain dan komunikasi digital AKQA, dan Monash University di Melbourne, Australia bekerja untuk menyelesaikannya dengan sesuatu yang disebut Aksi Audio. Ini adalah aliran audio online yang dikembangkan untuk siaran Australia Terbuka bulan lalu untuk membantu 285 juta orang di seluruh dunia — banyak di antaranya adalah penggemar tenis — hidup dengan kebutaan atau penglihatan gangguan.

“Cara mudah untuk memahaminya adalah… apakah Anda terbiasa dengan deskripsi audio?” Tim Devine, direktur kreatif eksekutif AKQA, mengatakan kepada Digital Trends. “Banyak orang buta dan rabun menggunakannya. Ini semacam deskripsi audio versi abstrak untuk memberi orang lebih banyak informasi tentang apa yang terjadi [di lapangan].”

Jadi komentar, pada dasarnya?

Tentu saja, ada semacam deskripsi audio yang sudah ada dalam olahraga selama bertahun-tahun — dan itu sama salah satu yang memungkinkan penggemar olahraga untuk mendengarkan olahraga di radio, di mana gambar tidak terlalu banyak memasok. Tapi komentar audio dari pakar tidak sama dengan bisa menonton pertandingan dan sampai pada kesimpulan Anda sendiri. Ide dari Audio Aksi adalah mengambil gambar dari tindakan di lapangan, dan kemudian mengubahnya menjadi isyarat tindakan yang tidak mengganggu bahasa — dengan suara yang berbeda untuk mengilustrasikan pukulan forehand, backhand, pukulan jarak dekat yang menggigit kuku, dan lagi.

“[Kami ingin orang-orang dapat] menilai sendiri apa yang terjadi di lapangan,” kata Devine. “Sehingga mereka bisa memiliki wawasannya sendiri, bukan hanya memiliki wawasan yang dibuat oleh seorang komentator. Mereka memiliki lebih banyak informasi. Mereka dapat mengatakan, 'wow, Federer benar-benar melakukan pukulan backhand malam ini.' Tanpa Action Audio, mereka tidak dapat memiliki wawasan itu karena tidak ada yang memberi tahu mereka 'itu backhand' atau 'itu forehand.' Tapi Anda bisa melakukannya dengan sangat mudah dengan audio abstrak sinyal.”

Teknologi ini bekerja dengan menggunakan data spasial 3D dari sistem penglihatan kamera/komputer berkecepatan tinggi yang disebut Mata Elang, yang melacak posisi bola secara real time untuk panggilan saluran elektronik untuk tujuan penilaian. Informasi ini kemudian diubah menjadi audio 3D, mengubah tindakan menjadi isyarat suara individual, sekaligus mengubah tempat suara tampaknya berasal untuk memungkinkan penggemar mengetahui di mana bola berada di lapangan pada saat tertentu momen. “Kami mendekonstruksi olahraga untuk merekonstruksinya menjadi suara,” kata Devine.

Dia mencatat bahwa proyek tersebut terinspirasi oleh teknologi substitusi sensorik ahli saraf David Eagleman. Eagleman, siapa Tren Digital diwawancarai tahun lalu, telah lama mengeksplorasi substitusi sensorik yang mampu, misalnya, menangkap suara dan mengubahnya menjadi pola getaran pada rompi atau gelang yang dapat dikenakan. Ini dapat digunakan untuk memungkinkan orang tuli untuk memahami apa yang dikatakan seseorang ketika mereka berbicara.

“Kalau dipikir-pikir, setiap sinyal yang masuk ke dalam tubuh, tidak peduli apapun itu, adalah abstrak, kan?” kata Devina. “Kami baru belajar memecahkan kode sinyal itu. Jadi, tidak ada alasan mengapa kami tidak dapat membuat — [dan belajar memahami] — sinyal abstrak yang datang melalui saluran audio.”

Di luar Australia Terbuka

Untuk Australia Terbuka, Action Audio tersedia sebagai saluran audio televisi sebagai bagian dari siaran. Isyarat audio, yang dapat didengarkan secara terpisah atau dengan komentar audio, menawarkan suara forehand dan backhand, bersama dengan yang lain untuk menunjukkan seberapa dekat bola dengan garis. Devine mengatakan bahwa, di masa depan, ada peluang untuk memperluas ini — cara yang sama seperti bahasa lisan apa pun dapat digunakan untuk mengomunikasikan niat sederhana, serta pengamatan yang jauh lebih mendetail. Di masa mendatang, bahkan mungkin bagi pengguna untuk menyesuaikan sistem untuk diri mereka sendiri, baik mengubah isyarat audio tertentu atau, berpotensi, menambahkan atau menghapus detail tergantung pada apa yang ingin mereka lihat disorot. Kemungkinannya tidak terbatas.

Devine mengakui bahwa ini adalah pekerjaan yang menantang, tidak hanya secara teknologi, tetapi juga dalam memastikan mereka meningkatkan pengalaman menonton, bukan menguranginya. “Mendengar bagi orang buta atau rabun adalah perasaan yang sangat berarti dan berharga,” katanya. Di tempat lain dalam wawancara, dia menegaskan bahwa tim sedang "mencoba mengurangi beban kognitif" pada pengguna.

Setelah mendemonstrasikan teknologinya, mereka sekarang berharap untuk memperluasnya ke cakupan turnamen tenis lainnya seperti Wimbledon (yang sudah menggunakan beberapa A.I. teknologi), Prancis Terbuka, dan AS Terbuka. Mereka juga percaya bahwa mereka dapat memperluas ke olahraga lain juga — meskipun ini akan menimbulkan tantangan baru.

“Tenis sebenarnya adalah contoh audio aksi yang sangat bagus, karena dinamis,” kata Devine. “Ada saat-saat berhenti, dan saat-saat aksi penuh di mana semua orang diam. Tetapi setiap olahraga sangat berbeda. Bagaimana kita bisa mensonifikasi selancar? Bagaimana kita memberi orang gambaran tentang apa yang dilakukan seorang peselancar? Apa yang kita identifikasi? Bagaimana dengan acara multipemain seperti bola basket? Bagaimana kita tahu informasi apa yang ingin didengar oleh seseorang yang buta atau rabun? Di situlah proses codesign akan bekerja.”

Masih banyak pekerjaan yang harus dilakukan, tetapi ini jelas merupakan awal yang menjanjikan.