Stanfordin A.I. Katsoo mykistettyä animaatiota ja toistaa sen aiheuttaman äänen

[SIGGRAPH 2018] [Kohokohdat] Kohti aaltopohjaista äänisynteesiä tietokoneanimaatioon

Elokuvan alkuaikoina urkurit lisäsivät mykkäelokuviin äänitehosteita soittamalla mukana mitä tahansa ruudulla tapahtuvaa. Siirry eteenpäin vuoteen 2018, ja tämän idean muunnelma muodostaa perustan Stanfordin yliopiston tietotekniikan tutkijoiden tekemälle uudelle työlle. He ovat kehittäneet an tekoäly järjestelmä, joka pystyy syntetisoimaan realistisia ääniä tietokoneanimaatioita varten täysin sen näkemien kuvien ja fyysisen maailman tuntemuksen perusteella. Tuloksena on syntetisoituja ääniä napin painalluksella.

Suositellut videot

"Olemme kehittäneet ensimmäisen järjestelmän äänien automaattiseen syntetisoimiseen fysiikkapohjaisten tietokoneanimaatioiden mukana." Jui-Hsien Wang, jatko-opiskelija Stanfordin laskennallisen ja matemaattisen tekniikan instituutista (ICME), kertoi Digital Trendsille. "Lähestymistapamme on yleinen, [tarkoittaa, että] se voi laskea realistisia äänilähteitä monenlaisille animaatioille. ilmiöt – kuten kiinteät kappaleet, kuten keraaminen kulho tai taipuisa törmäyssymbaali, sekä nesteen kaataminen kuppi."

Tekniikka, joka saa järjestelmän toimimaan, on melko älykästä. Se ottaa huomioon 3D-mallinnuksen aikana koottujen kohteiden vaihtelevan sijainnin kohtauksessa. Se tunnistaa, mitä nämä ovat, ja ennustaa sitten, kuinka ne vaikuttavat tuotettuihin ääniin, olipa kyseessä sitten niiden heijastus, sironta, r tai diffraktio.

Liittyvät

  • Hauska kaava: Miksi koneella luotu huumori on A.I: n pyhä malja?
  • Nvidian uusi ääni A.I. kuulostaa ihan oikealta ihmiseltä
  • Voiko A.I. päihittää ihmisinsinöörit mikrosirujen suunnittelussa? Google ajattelee niin

"Upea asia lähestymistavassamme on, että harjoitustietoja ei tarvita", Wang jatkoi. "Se simuloi ääntä ensimmäisistä fyysisistä periaatteista."

Sen lisäksi, että tekniikka auttaa lisäämään nopeammin äänitehosteita animaatioelokuviin, se voisi myös olla sellainen Päivää käytetään auttamaan suunnittelijoita selvittämään, miltä tuotteet kuulostavat ennen kuin ne ovat fyysisiä tuotettu.

Ei ole tietoa siitä, milloin tämä työkalu saatetaan saattaa julkisesti saataville, mutta Wang sanoi, että tiimi "tutkii parhaillaan vaihtoehtoja työkalun saattamiseksi saataville". Ennen sitä päästään siihen pisteeseen, mutta tutkijat haluavat parantaa järjestelmän kykyä mallintaa monimutkaisempia esineitä, kuten Stradivariuksen reheviä kaikuvia ääniä. viulu.

Tutkimus esitellään osana ACM SIGGRAPH 2018 -tapahtumaa, joka on maailman johtava tietokonegrafiikan ja interaktiivisten tekniikoiden konferenssi. Odota hetki ja sääli Pixarin köyhää foley-taiteilijaa hallin takaosassa, joka juuri osti uuden talon!

Toimittajien suositukset

  • Analoginen A.I.? Kuulostaa hullulta, mutta se saattaa olla tulevaisuutta
  • Nvidian uusin A.I. tulokset osoittavat, että ARM on valmis palvelinkeskukseen
  • Nvidia alentaa A.I: n pääsyn estettä. Fleet Commandin ja LaunchPadin kanssa
  • Lue aavemaisen kaunista A.I: n synteettistä kirjoitusta. joka luulee olevansa Jumala
  • Googlen LaMDA on älykäs kieli A.I. keskustelun ymmärtämiseksi paremmin

Päivitä elämäntapasiDigital Trends auttaa lukijoita pysymään tekniikan nopeatempoisessa maailmassa uusimpien uutisten, hauskojen tuotearvostelujen, oivaltavien toimitusten ja ainutlaatuisten kurkistusten avulla.