[SIGGRAF 2018] [Højdepunkter] Mod bølgebaseret lydsyntese til computeranimation
I biografens tidlige dage tilføjede organister lydeffekter til stumfilm ved at spille med på, hvad der skete på skærmen. Hop frem til 2018, og en variation af denne idé danner grundlaget for nyt arbejde udført af Stanford University dataloger. De har udviklet en kunstig intelligens system, der er i stand til at syntetisere realistiske lyde til computeranimation udelukkende baseret på de billeder, det ser, og dets viden om den fysiske verden. Resultaterne er syntetiserede lyde ved et tryk på en knap.
Anbefalede videoer
"Vi har udviklet det første system til automatisk syntetisering af lyde til at ledsage fysikbaserede computeranimationer," Jui-Hsien Wang, en kandidatstuderende ved Stanford's Institute for Computational and Mathematical Engineering (ICME), fortalte Digital Trends. "Vores tilgang er generel, [hvilket betyder, at] den kan beregne realistiske lydkilder til en bred vifte af animerede fænomener - såsom faste kroppe som en keramisk skål eller en fleksibel crash bækken, såvel som væske, der hældes i en kop."
Teknologien, der får systemet til at fungere, er ret smart. Den tager højde for den varierende position af objekterne i scenen, som de er samlet under 3D-modelleringsprocessen. Den identificerer, hvad disse er, og forudsiger derefter, hvordan de vil påvirke lyde, der produceres, hvad enten det er for at reflektere, sprede, r eller diffraktere dem.
Relaterede
- Den sjove formel: Hvorfor maskingenereret humor er den hellige gral for A.I.
- Nvidias nye stemme A.I. lyder bare som en rigtig person
- Kan A.I. slå menneskelige ingeniører ved at designe mikrochips? Det mener Google
"En stor ting ved vores tilgang er, at der ikke kræves træningsdata," fortsatte Wang. "Det simulerer lyd fra de første fysiske principper."
Ud over at hjælpe hurtigere med at tilføje lydeffekter til animerede film, kunne teknologien også gøre det dag bruges til at hjælpe designere med at finde ud af, hvordan produkter kommer til at lyde, før de er fysisk produceret.
Der er ingen ord om, hvornår dette værktøj kan blive gjort offentligt tilgængeligt, men Wang sagde, at holdet i øjeblikket "udforsker muligheder for at gøre værktøjet tilgængeligt." Før det når til det punkt, men forskerne ønsker at forbedre systemets evne til at modellere mere komplekse objekter, såsom de frodige genklang af en Stradivarius violin.
Forskningen skal præsenteres som en del af ACM SIGGRAPH 2018, verdens førende konference om computergrafik og interaktive teknikker. Brug et øjeblik på at have ondt af den stakkels Pixar-foley-kunstner bagerst i hallen, der lige har købt et nyt hus!
Redaktørernes anbefalinger
- Analog A.I.? Det lyder skørt, men det er måske fremtiden
- Nvidias seneste A.I. resultater viser, at ARM er klar til datacentret
- Nvidia sænker barrieren for adgang til A.I. med Fleet Command og LaunchPad
- Læs det uhyggeligt smukke 'syntetiske skrift' af en A.I. der tror, det er Gud
- Googles LaMDA er et smart sprog A.I. for en bedre forståelse af samtalen
Opgrader din livsstilDigital Trends hjælper læserne med at holde styr på den hurtige teknologiske verden med alle de seneste nyheder, sjove produktanmeldelser, indsigtsfulde redaktionelle artikler og enestående smugkig.