אודיו פעולה
THWOK. פונק. ת'וק. פונק. THWOK. פונק. ת'וק. הריעות מתעצמות. פונק. THWOK. חריקת נעלי ספורט על אספלט. פונק. הַפסָקָה. מחיאות כפיים נלהבות.
תוכן
- אז פרשנות, בעצם?
- מעבר לאליפות אוסטרליה הפתוחה
מזהים את זה? כמובן שאתה לא. זה, למעשה, של רוג'ר פדרר"זריקה בלתי אפשרית" נגד אנדרה אגסי ברבע הגמר של אליפות דובאי בטניס 2005. זהו רגע מושלם של טניס בערך כפי שניתן היה לקוות לראות, שהפך לבלתי מובן על ידי העובדה שהוא משוחזר כאן כנוף סאונד מופשט.
סרטונים מומלצים
קל לעקוב אחרי טניס מבחינה ויזואלית, ברמת האודיו-נוף, קשה לעקוב אחריו כמו פרק של טווין פיקס נדלקת באמצע הדרך. זה אתגר מהנדסים מטניס אוסטרליה, סוכנות העיצוב והתקשורת הדיגיטלית AKQA, ואוניברסיטת מונאש במלבורן, אוסטרליה פועלים לפתור עם משהו שנקרא פעולה שֶׁמַע. זהו זרם אודיו מקוון שפותח עבור שידורי אוסטרליה הפתוחה בחודש שעבר כדי לסייע ל 285 מיליון אנשים ברחבי העולם - רבים מהם חובבי טניס - חיים עם עיוורון או חזותית ירידת ערך.
"דרך קלה להבין את זה היא... האם אתה מכיר תיאורי אודיו?" טים דיווין, המנהל הקריאטיבי של AKQA, אמר ל-Digital Trends. "הרבה עיוורים ובעלי ראייה לקויה משתמשים בהם. זו סוג של גרסה מופשטת של תיאורי אודיו כדי לתת לאנשים מידע נוסף על מה שקורה [במגרש]".
אז פרשנות, בעצם?
יש, כמובן, סוג של תיאור קולי שקיים בספורט כבר שנים - וזה אותו דבר כזה שמאפשר לחובבי ספורט להאזין לספורט ברדיו, שבו תמונות לא בדיוק בשפע לְסַפֵּק. אבל פרשנות אודיו של מבקרים זה לא אותו דבר כמו היכולת לצפות במשחק ולהגיע למסקנות משלך. הרעיון של אודיו פעולה הוא לצלם תמונות של הפעולות בבית המשפט, ולאחר מכן להפוך אותן לרמז פעולה לא פולשני שפה - עם צלילים שונים להמחשת ידיים קדמיות, גב הידיים, צילומים קרובים עד ציפורניים, ו יותר.
"[רצינו שאנשים יוכלו] להעריך בעצמם את מה שקורה על המגרש", אמר דיווין. "אז הם יכולים לקבל תובנות משלהם, ולא רק לקבל את התובנות שנוצרו על ידי פרשן. יש להם מידע נוסף. הם מסוגלים לומר, 'וואו, פדרר באמת פוגע בגב היד הלילה'. בלי אקשן אודיו, הם לא יכלו לקבל את התובנה הזו כי אף אחד לא אומר להם 'זה גב היד' או 'זה גב היד'. אבל אתה יכול לעשות את זה בקלות רבה עם אודיו מופשט אותות."
אודיו פעולה - דוגמה
הטכנולוגיה פועלת על ידי שימוש בנתונים מרחביים תלת מימדיים ממצלמה מהירה/מערכת ראייה ממוחשבת הנקראת הוק-עין, העוקב אחר מיקום הכדור בזמן אמת לקריאות קו אלקטרוני למטרות ניקוד. מידע זה הופך לאחר מכן לאודיו תלת-ממדי, הופך פעולות לרמזים קוליים בודדים, תוך מעבר למקום שבו נראה שהקול מגיע כדי לאפשר לאוהדים לקבל תחושה היכן הכדור נמצא על המגרש בכל פרט רֶגַע. "אנחנו מפרקים את הספורט כדי לשחזר אותו כקול", אמר דיווין.
הוא ציין שהפרויקט נוצר בהשראת טכנולוגיית ההחלפה החושית של מדען המוח דיוויד איגלמן. איגלמן, מי מגמות דיגיטליות רואיינו בשנה שעברה, חקרה זמן רב החלפה חושית שמסוגלת, למשל, ללכוד קול ולהפוך אותו לדפוסי רטט על אפוד או צמיד לבישים. זה יכול לשמש כדי לאפשר לאדם חירש להבין מה אדם אומר כשהוא מדבר.
"אם אתה חושב על זה, כל אות שמגיע לגוף, לא משנה באיזה מובן הוא, הוא מופשט, נכון?" אמר דיווין. "אנחנו פשוט לומדים לפענח את האות הזה. אז אין סיבה שלא נוכל ליצור - [וללמוד להבין] - אות מופשט שמגיע דרך ערוץ שמע".
מעבר לאליפות אוסטרליה הפתוחה
עבור אליפות אוסטרליה הפתוחה, Action Audio היה זמין כערוץ אודיו בטלוויזיה כחלק מהשידור. רמזים אודיו, שניתן היה להאזין להם במנותק או עם פרשנות קולית, הציעו צלילים עבור פורה-הנד ובק-הנד, יחד עם אחרים כדי לציין עד כמה הכדור קרוב לקו. דיווין אמר שבעתיד יש הזדמנויות להרחיב את זה - באותה דרך שבה ניתן להשתמש בכל שפה מדוברת כדי להעביר כוונות פשוטות, כמו גם תצפיות מפורטות בהרבה. בעתיד, ייתכן אפילו שמשתמשים יוכלו להתאים את המערכת לעצמם, או לשנות את רמזים אודיו ספציפיים או, אולי, הוספה או הסרה של פרטים בהתאם למה שהם רוצים לראות מודגש. האפשרויות אינסופיות.
Devine הודה כי מדובר בעבודה מאתגרת, לא רק מבחינה טכנולוגית, אלא גם להבטיח שהם משפרים את חווית הצפייה, לא פוגעים בה. "שמיעה לאדם עיוור או לקוי ראייה היא חוש מאוד משמעותי ויקר", ציין. במקום אחר בראיון, הוא טען שהצוות "מנסה להפחית עומס קוגניטיבי" על משתמשים.
לאחר שהדגימו את הטכנולוגיה, הם מקווים כעת להרחיב אותה לסיקור של טורנירי טניס אחרים כמו ווימבלדון (ש כבר משתמש ב-A.I מרשים. טכנולוגיה), אליפות צרפת הפתוחה ואליפות ארצות הברית הפתוחה. הם גם מאמינים שהם יכולים להתרחב גם לענפי ספורט אחרים - אם כי זה יעורר אתגרים חדשים.
"טניס הוא למעשה דוגמה ממש טובה לאודיו אקשן, כי הוא דינמי", אמר דווין. "יש לזה רגעים של עצירה, ורגעים של אקשן מלא שבהם כולם שקטים. אבל כל ספורט הוא שונה לגמרי. איך נוכל לגלוש בקול? איך אנחנו נותנים לאנשים תחושה של מה הגולש עושה? מה אנחנו מזהים? מה דעתך על אירועים מרובי משתתפים כמו כדורסל? איך נדע מה המידע שמישהו עיוור או לקוי ראייה היה רוצה לשמוע? זה המקום שבו תהליך עיצוב משותף יעבוד".
יש עוד עבודה לעשות, אבל אלה בהחלט התחלות מבטיחות.