Intel 3DAT A.I. є «Святим Граалем» Training Tech

Джонатан Лі, директор із технологій спортивних досягнень у Intel Olympic Technology Group, літав 11 годин і перебував на карантині протягом 14 днів, щоб зшити скелети на комп’ютері. І якщо це спрацює так добре, як він сподівається, це стане дивовижною інновацією для відтворення дій на Олімпійських іграх Тойко 2020 року.

«Частина нашого штучного інтелекту [створена] для зшивання правильних скелетів, коли у вас є до восьми чи дев’яти спортсменів. бігаючи по доріжці», — сказав Лі Digital Trends зі свого готельного номера в Олімпійському селищі Токіо, за 5000 миль від його дому в Сані. Франциско.

Він є частиною команди інженерів Intel, яка була направлена ​​на Ігри в Токіо для об’єднання Технологія Intel 3D Athlete Tracking (або 3DAT, вимовляється як «три дані») у цьому році на Олімпіаді трансляції. Захоплюючі накладні візуалізації 3DAT будуть доступні під час повторів змагань на дистанціях 100 метрів, 200 метрів, естафети 4 × 100 метрів і бігу з перешкодами, які відбуватимуться з 30 липня по 4 серпня.

«3D-відстеження спортсменів… — це технологія, яку ми розробили тут, у Intel, яка дозволяє нам знімати стандартне відео спортсменів і отримувати інформацію про їх форму та рухи», — сказав Лі. «Ми робимо це за допомогою штучного інтелекту. і комп'ютерний зір. [Використовуючи нашу технологію, ми можемо] розпізнавати різні частини тіла, починаючи від очей і носа й аж донизу до щиколоток і пальців ніг і використовуйте це для побудови тривимірного скелета спортсмена або, в деяких випадках, кількох спортсмени. З цих скелетів ми можемо потім витягти інформацію, таку як швидкість, прискорення та біомеханіка».

Простіше кажучи, 3DAT об’єднує відео, зняте з кількох 4K камери машинного бачення з трансляцією кадрів і використовує це для створення тривимірної моделі олімпійців у дії. Вони можуть бути використані для створення комп’ютерних повторів дії. Що дає цьому перевагу перед традиційними відеоповторами, однак, це те, що технологія 3DAT може поглинати його різні джерела відеозаписів і використовувати їх для створення моделей захоплення руху, які можна обертати в 3D простір.

«Ви даєте [мовнику] можливість, по суті, обертати, масштабувати, розміщувати камеру, де вони хочуть», — сказав Лі.

Теплові карти і не тільки

Це також не просто обертання «камери». Витягуючи такі дані, як швидкість і прискорення, з 3D-моделей, 3DAT може накладати на моделі додаткову інформацію, таку як теплові карти, щоб вказати, наскільки швидко спортсмен біжить, коли він досягає максимальної швидкості та як довго він може підтримувати цю швидкість. швидкість. Це вражаючий рівень візуалізації даних, який ніколи раніше не пробувався на Олімпійських іграх — чи майже будь-де, якщо на те пішло.

«Те, що ви хочете, — це щось корисне та красиве, що допомагає глядачеві вдома справді зв’язатися зі спортсменами та зрозуміти те, чого вони раніше не знали», — сказав Лі.

Захоплення руху, звичайно, не є чимось новим. Його використовували в Голлівуді роками, особливо в деяких дивовижних театральних виставах такі компанії, як Weta Digital, від акторів, таких як Енді Серкіс (який грав усіх із Голлума в Володар кілець до Цезаря в Світанок планети мавп до Кінг-Конга, помиляйтеся, Кінг Конг). Mo-cap також часто використовується в ігровому світі, щоб переконатися, що аватари на екрані максимально наближені до реальних людей. Але в той час як багато комбінезонів оснащені датчиками, щоб фіксувати рухи окремих кінцівок, 3DAT не потребує жодних датчиків.

Проблема, сказав Лі, полягає в тому, що час костюми для захоплення руху підходять для певних сценаріїв, відстеження спортсменів елітного рівня не обов’язково є серед них.

«Уявіть, що ви поклали датчик на чиюсь голову, лікоть, груди, а потім сказали: «Гаразд, іди, зроби кайф». стрибни, і коли ти приземлишся, ти відчуєш, як усі ці датчики вдавлюються у твоє тіло, чи не так?» він сказав. «Ви можете собі уявити, що це не обов’язково приємний досвід. Або [як щодо] спринтера? Якщо датчик розміщено прямо під коліном, це заважатиме тому, як вони виходять із блоків і як вони біжать».

Натомість 3DAT повністю покладається на комп’ютерний зір і алгоритми оцінки пози для аналізу біомеханіки рухів спортсменів. Лі сказав, що це можна зробити достатньо точно, щоб вловити навіть найменші нюанси руху спортсмена. Трекери не потрібні.

Майбутнє 3DAT

Пам’ятаючи про це, Лі розглядає 3DAT не просто як інструмент перегляду даних для розваги та інформування глядачів удома. Він також використовується як тренувальний інструмент для спортсменів, щоб перевірити свою продуктивність. «Ми мали трьох різних тренерів елітного рівня, які використовували ту саму фразу, щоб описати це як «святий Грааль тренерства», — сказав він. Один потенційно трансформаційний варіант використання? Допомога в діагностиці травм.

«Одна з найбільших проблем, які впливають на спортсменів, — це травми м’яких тканин», — сказав Лі. «Зазвичай вони починають проявлятися у формі асиметрії. Тож, можливо, ваша довжина кроку ліворуч і праворуч може змінитися, або те, як рухаються стегна, може [змінитися], чи не так? Це речі, які можуть статися ще до того, як станеться травма. Якщо ви почнете дивитися на спортсмена трохи поздовжньо — скажімо, на початку сезону, під час, після, можливо, під час якогось функціонального оцінка рухів — [AI] може взяти на себе розпізнавання передвісників травм, [щоб тренери та спортсмени] могли відвернути їх, перш ніж вони статися».

З цієї причини Лі бачить, що майбутнє 3DAT все більше пов’язане зі штучним інтелектом. «Виникає питання, що ви робите з усіма цими даними?» зазначив він. «Ось тут я бачу наступний рубіж для 3DAT… Повинен бути наступний рівень, чи то для запобігання травмам, чи для покращення продуктивності, чи допомоги у реабілітації… На наступне запитання нам потрібно відповісти, щоб перетворити цю технологію з [справді] крутою на технологію, яка є крутою та [неймовірно] корисно».

Однак наразі глядачам Олімпіади доведеться погодитися лише на «справді круто». Щось нам підказує, що, мабуть, буде достатньо. Незабаром на змаганнях із золотою медаллю поблизу вас (або, принаймні, на вашому телебаченні).

Рекомендації редакції

• Смішна формула: чому гумор, створений машиною, є святим Граалем А.І.
• Під радаром: як 117-річна технологія дає олімпійським метальникам перевагу