Action Audio Spor Yayınları Kulaklarınız İçin Braille Alfabesi Gibidir

THWOK. Ponk. Teşekkürler. Ponk. THWOK. PONK. Teşekkürler. Tezahürat yoğunlaşıyor. Ponk. THWOK. Spor ayakkabıların asfaltta çıkardığı gıcırtı. PONK. Duraklat. Coşkulu alkış.

Onu tanı? Tabii ki bilmiyorsun. Aslında, Roger Federer'in "imkansız atış” 2005 Dubai Tenis Şampiyonası çeyrek finalinde Andre Agassi'ye karşı. Burada soyut bir ses manzarası olarak yeniden üretildiği gerçeğiyle anlaşılmaz hale getirilen, tanık olmayı umabileceği kadar mükemmel bir tenis anı.

Tenisi görsel olarak takip etmek ne kadar kolaysa, işitsel düzeyde de takip etmek bir bölüm kadar zor. İkiz tepeler yarısında açtınız. Bu bir meydan okumadır, Tennis Australia, dijital tasarım ve iletişim ajansı AKQA'dan mühendisler, ve Melbourne, Avustralya'daki Monash Üniversitesi, Eylem adlı bir şeyle sorunu çözmek için çalışıyor. Ses. Geçen ayki Avustralya Açık yayınları için geliştirilmiş çevrimiçi bir ses akışıdır. Dünya çapında 285 milyon insan - çoğu tenis fanatiği - körlük veya görme bozukluğu ile yaşıyor bozulma.

"Bunu anlamanın kolay bir yolu... sesli açıklamalara aşina mısın?" AKQA'nın yaratıcı direktörü Tim Devine, Digital Trends'e şunları söyledi: “Birçok kör ve az gören insan bunları kullanıyor. Bu, insanlara [mahkemede] olup bitenler hakkında daha fazla bilgi vermek için sesli açıklamaların bir nevi soyut versiyonu.”

Yani temelde yorum?

Elbette sporda yıllardır var olan bir tür sesli anlatım var ve bu aynı spor hayranlarının, görüntülerin tam olarak bol olmadığı radyoda spor dinlemesine olanak tanıyan tedarik. Ancak uzmanlardan gelen sesli yorumlar, bir maç izleyip kendi çıkarımlarınıza varmakla aynı şey değildir. In fikri Aksiyon Sesi mahkemedeki eylemlerin görüntülerini çekmek ve ardından bunları göze çarpmayan bir eylem işaretine dönüştürmektir. dil — forehandleri, backhandleri, tırnak ısırtan yakın çekimleri ve Daha.

Devine, "[İnsanların] sahada olup bitenler hakkında kendi değerlendirmelerini yapabilmelerini istedik," dedi. "Böylece, yalnızca bir yorumcu tarafından oluşturulan içgörülere sahip olmak yerine kendi içgörülerine sahip olabilirler. Daha fazla bilgiye sahipler. "Vay canına, Federer bu gece gerçekten ters vuruş yapıyor" diyebiliyorlar. Action Audio olmadan bu kavrayışa sahip olamazlar çünkü kimse onlara "bu bir backhand" veya "bu bir forehand" demiyor. Ancak bunu soyut sesle çok kolay bir şekilde yapabilirsiniz. sinyaller.”

Teknoloji, adı verilen yüksek hızlı bir kamera/bilgisayar görüş sisteminden alınan 3B uzamsal verileri kullanarak çalışır. Şahin göz, puanlama amacıyla elektronik hat araması için topun konumunu gerçek zamanlı olarak takip eder. Bu bilgi daha sonra 3D sese dönüştürülerek eylemleri bireysel ses ipuçlarına dönüştürürken aynı zamanda sesin geldiği yere de kayıyor. Taraftarların herhangi bir anda topun sahanın neresinde olduğunu anlamalarını sağlamak için ses geliyor gibi görünüyor. an. Devine, "Sporu ses olarak yeniden yapılandırmak için yapısökümüne uğratıyoruz" dedi.

Projenin sinirbilimci David Eagleman'ın duyusal ikame teknolojisinden ilham aldığını belirtti. Kartalcı kim Geçen yıl görüşülen Dijital Eğilimler, örneğin sesi yakalayabilen ve onu giyilebilir bir yelek veya bileklik üzerinde titreşimli desenlere dönüştürebilen duyusal ikameyi uzun süredir araştırmıştır. Bu, sağır bir kişinin konuştuğunda bir kişinin ne dediğini anlamasına izin vermek için kullanılabilir.

“Düşünürseniz, hangi duyu olursa olsun vücuda gelen her sinyal soyuttur, değil mi?” Devin dedi. "Sadece bu sinyali çözmeyi öğreniyoruz. Bu nedenle, bir ses kanalından gelen soyut bir sinyal oluşturup [ve anlamayı öğrenemememiz] için hiçbir neden yok."

Avustralya Açık'ın Ötesinde

Avustralya Açık için Action Audio, yayının bir parçası olarak bir televizyon ses kanalı olarak mevcuttu. Ayrı ayrı veya sesli yorumla birlikte dinlenebilen sesli ipuçları, topun çizgiye ne kadar yakın olduğunu belirtmek için diğerleri ile birlikte forehand ve backhand için sesler sunuyordu. Devine, gelecekte bunu genişletmek için fırsatlar olduğunu söyledi - tıpkı herhangi bir konuşma dilinin basit niyetleri ve çok daha ayrıntılı gözlemleri iletmek için kullanılabileceği gibi. Gelecekte, kullanıcıların sistemi kendileri için özelleştirmeleri bile mümkün olabilir. belirli ses ipuçları veya potansiyel olarak görmek istediklerine bağlı olarak ayrıntı ekleme veya çıkarma vurgulanmıştır. İmkanlar sonsuzdur.

Devine, bunun yalnızca teknolojik açıdan değil, aynı zamanda izleme deneyimini azaltmadan iyileştirmelerini sağlama açısından da zorlu bir iş olduğunu kabul etti. "Kör veya az gören biri için işitmek çok anlamlı ve değerli bir duyudur" dedi. Röportajın başka bir yerinde, ekibin kullanıcılar üzerindeki "bilişsel yükü azaltmaya çalıştığını" iddia etti.

Teknolojiyi gösterdikten sonra, şimdi bunu Wimbledon gibi diğer tenis turnuvalarını kapsayacak şekilde genişletmeyi umuyorlar (bu zaten bazı etkileyici yapay zeka kullanıyor. teknoloji), Fransa Açık ve ABD Açık. Ayrıca diğer sporlara da genişleyebileceklerine inanıyorlar - ancak bu yeni zorluklar doğuracak.

Devine, "Tenis aslında aksiyon sesinin gerçekten iyi bir örneği, çünkü dinamik," dedi. Durma anları ve herkesin sessiz olduğu tam aksiyon anları var. Ancak her spor oldukça farklıdır. Sörf yapmayı nasıl seslendirebiliriz? İnsanlara bir sörfçünün ne yaptığına dair bir fikir nasıl veririz? Neyi tanımlıyoruz? Basketbol gibi çok oyunculu etkinliklere ne dersiniz? Görme engelli veya az gören birinin hangi bilgiyi duymak isteyeceğini nasıl bilebiliriz? Ortak tasarım sürecinin çalışacağı yer burasıdır."

Yapılacak daha çok iş var ama bunlar kesinlikle umut verici başlangıçlar.