Стенфордський А.І. Переглядає приглушену анімацію, відтворює звук, який би видав

[SIGGRAPH 2018] [Основні моменти] До звукового синтезу на основі хвиль для комп’ютерної анімації

На початку кінематографа органісти додавали звукові ефекти до німого кіно, підігруючи всьому, що відбувалося на екрані. Перескочимо вперед до 2018 року, і варіація цієї ідеї ляже в основу нової роботи, проведеної комп’ютерними вченими Стенфордського університету. Вони розробили штучний інтелект система, здатна синтезувати реалістичні звуки для комп’ютерної анімації на основі зображень, які вона бачить, і своїх знань про фізичний світ. Результатом є синтезовані звуки одним натисканням кнопки.

Рекомендовані відео

«Ми розробили першу систему автоматичного синтезу звуків для супроводу комп’ютерної анімації на основі фізики», Цзюй-Сянь Ван, аспірант Стенфордського інституту обчислювальної та математичної інженерії (ICME), розповів Digital Trends. «Наш підхід є загальним, [це означає, що] він може обчислювати реалістичні джерела звуку для широкого діапазону анімованих такі явища, як тверді тіла, як-от керамічна чаша чи гнучка тарілка, а також рідина, що вливається в Кубок."

Технологія, завдяки якій система працює, біса розумна. Він враховує зміну положення об’єктів у сцені, зібраних під час процесу 3D-моделювання. Він визначає, що це таке, а потім передбачає, як вони вплинуть на звуки, що виробляються, чи то відображатимуть, розсіюють, r чи дифрагують.

Пов'язані

  • Смішна формула: чому гумор, створений машиною, є святим Граалем А.І.
  • Новий голос Nvidia A.I. звучить як справжня людина
  • Чи може А.І. перемогти інженерів-людей у ​​розробці мікрочіпів? Google так вважає

«Чудова особливість нашого підходу полягає в тому, що не потрібні дані для навчання», — продовжив Ван. «Він симулює звук з перших фізичних принципів».

Окрім того, що ця технологія може допомогти швидше додавати звукові ефекти до анімаційних фільмів, вона також може це зробити день використовувати, щоб допомогти дизайнерам визначити, як продукти будуть звучати, перш ніж вони будуть фізично виробляється.

Немає жодної інформації про те, коли цей інструмент може бути загальнодоступним, але Ван сказав, що команда зараз «вивчає варіанти, як зробити інструмент доступним». Перед цим доходить до цього моменту, однак дослідники хочуть покращити здатність системи моделювати більш складні об’єкти, такі як соковиті ревербераційні тони Страдіварі скрипка.

Дослідження планується представити в рамках ACM SIGGRAPH 2018, провідної світової конференції з комп’ютерної графіки та інтерактивних технологій. Витратьте секунду, щоб пошкодувати бідного художника Pixar Foley у глибині залу, який щойно купив новий будинок!

Рекомендації редакції

  • Аналоговий ШІ? Це звучить божевільно, але це може бути майбутнє
  • Найновіший штучний інтелект Nvidia. результати доводять, що ARM готова до центру обробки даних
  • Nvidia знижує бар'єр для входу в A.I. з Fleet Command і LaunchPad
  • Прочитайте моторошно красиве «синтетичне писання» штучного інтелекту. що думає, що це Бог
  • LaMDA від Google – це інтелектуальна мова ШІ. для кращого розуміння розмови

Оновіть свій спосіб життяDigital Trends допомагає читачам стежити за динамічним світом технологій завдяки всім останнім новинам, цікавим оглядам продуктів, проникливим редакційним статтям і унікальним у своєму роді коротким оглядам.