ИИ на Станфорд Гледа заглушена анимация, възпроизвежда звука, който би издал

[SIGGRAPH 2018] [Акценти] Към базиран на вълни звуков синтез за компютърна анимация

В ранните дни на киното органистите добавяха звукови ефекти към неми филми, като свиреха заедно с всичко, което се случваше на екрана. Прескочете напред до 2018 г. и вариация на тази идея формира основата на нова работа, извършена от компютърни учени от Станфордския университет. Те са разработили изкуствен интелект система, която е в състояние да синтезира реалистични звуци за компютърна анимация, базирани изцяло на изображенията, които вижда, и познанията си за физическия свят. Резултатите са синтезирани звуци с едно натискане на бутон.

Препоръчани видеоклипове

„Разработихме първата система за автоматично синтезиране на звуци, които да придружават базирани на физика компютърни анимации,“ Джуй-Сиен Уанг, завършил студент в Станфордския институт за изчислително и математическо инженерство (ICME), каза пред Digital Trends. „Нашият подход е общ, [което означава, че] може да изчисли реалистични звукови източници за широк спектър от анимирани явления — като твърди тела като керамична купа или гъвкав чинел, както и течност, която се излива в чаша."

Технологията, която кара системата да работи, е адски умна. Той взема предвид различната позиция на обектите в сцената, както са сглобени по време на процеса на 3D моделиране. Той идентифицира какви са те и след това прогнозира как те ще повлияят на издаваните звуци, независимо дали ще ги отразяват, разсейват, r или дифрактират.

Свързани

  • Забавната формула: Защо машинно генерираният хумор е свещеният граал на ИИ
  • Новият глас на Nvidia A.I. звучи точно като истински човек
  • Може ли A.I. победи човешките инженери при проектирането на микрочипове? Google смята така

„Страхотно нещо в нашия подход е, че не са необходими данни за обучение“, продължи Уанг. „Той симулира звук от първите физически принципи.“

Освен че помага за по-бързото добавяне на звукови ефекти към анимационни филми, технологията може също да го направи ден да се използва, за да помогне на дизайнерите да измислят как ще звучат продуктите, преди да са физически произведени.

Няма информация кога този инструмент може да бъде направен публично достъпен, но Уанг каза, че в момента екипът „проучва опции за правене на инструмента достъпен“. Преди това стига до тази точка, но изследователите искат да подобрят способността на системата да моделира по-сложни обекти, като буйните ехтящи тонове на Страдивариус цигулка.

Изследването трябва да бъде представено като част от ACM SIGGRAPH 2018, водещата световна конференция за компютърна графика и интерактивни техники. Отделете секунда, за да съжалявате за бедния художник на Pixar Foley в дъното на залата, който току-що си купи нова къща!

Препоръки на редакторите

  • Аналогов AI? Звучи налудничаво, но това може да е бъдещето
  • Най-новият AI на Nvidia резултатите доказват, че ARM е готов за центъра за данни
  • Nvidia намалява бариерата за навлизане в A.I. с Fleet Command и LaunchPad
  • Прочетете зловещо красивото „синтетично писание“ на A.I. който мисли, че е Бог
  • LaMDA на Google е интелигентен езиков ИИ. за по-добро разбиране на разговора

Надградете начина си на животDigital Trends помага на читателите да следят забързания свят на технологиите с всички най-нови новини, забавни ревюта на продукти, проницателни редакционни статии и единствени по рода си кратки погледи.