L'IA de Stanford Regardez une animation en sourdine, joue le son qu'elle produirait

[SIGGRAPH 2018] [Points forts] Vers une synthèse sonore basée sur les ondes pour l'animation par ordinateur

Aux débuts du cinéma, les organistes ajoutaient des effets sonores aux films muets en jouant avec tout ce qui se passait à l’écran. Avancez jusqu’en 2018, et une variante de cette idée constitue la base de nouveaux travaux menés par des informaticiens de l’Université de Stanford. Ils ont développé un intelligence artificielle système capable de synthétiser des sons réalistes pour une animation par ordinateur entièrement basé sur les images qu’il voit et sa connaissance du monde physique. Les résultats sont des sons synthétisés sur simple pression d’un bouton.

Vidéos recommandées

"Nous avons développé le premier système de synthèse automatique de sons pour accompagner les animations informatiques basées sur la physique." Jui-Hsien Wang, étudiant diplômé de l’Institut d’ingénierie informatique et mathématique (ICME) de Stanford, a déclaré à Digital Trends. « Notre approche est générale, [ce qui signifie que] elle peut calculer des sources sonores réalistes pour une large gamme d'animations. phénomènes - tels que des corps solides comme un bol en céramique ou une cymbale crash flexible, ainsi que du liquide versé dans une tasse."

La technologie qui fait fonctionner le système est sacrément intelligente. Il prend en compte la position variable des objets dans la scène tels qu'assemblés au cours du processus de modélisation 3D. Il identifie de quoi il s'agit, puis prédit comment ils affecteront les sons produits, que ce soit pour les réfléchir, les disperser, les r ou les diffracter.

En rapport

  • La formule amusante: pourquoi l'humour généré par la machine est le Saint Graal de l'IA.
  • La nouvelle voix A.I. de Nvidia on dirait une vraie personne
  • L’IA peut-elle battre les ingénieurs humains dans la conception de micropuces? Google le pense

"L'un des avantages de notre approche est qu'aucune donnée de formation n'est requise", a poursuivi Wang. "Il simule le son à partir des premiers principes physiques."

En plus de permettre d'ajouter plus rapidement des effets sonores aux films d'animation, cette technologie pourrait également jour être utilisé pour aider les concepteurs à déterminer le son des produits avant qu'ils ne soient physiquement produit.

On ne sait pas quand cet outil pourrait être rendu public, mais Wang a déclaré que l'équipe «explore actuellement les options pour rendre l'outil accessible». Avant cela arrive à ce point, cependant, les chercheurs souhaitent améliorer la capacité du système à modéliser des objets plus complexes, tels que les sons réverbérants luxuriants d'un Stradivarius. violon.

La recherche devrait être présentée dans le cadre de l’ACM SIGGRAPH 2018, la principale conférence mondiale sur l’infographie et les techniques interactives. Prenez une seconde pour avoir pitié du pauvre bruiteur Pixar au fond de la salle qui vient d'acheter une nouvelle maison !

Recommandations des rédacteurs

  • Une IA analogique? Ça paraît fou, mais ça pourrait être l'avenir
  • La dernière A.I. de Nvidia les résultats prouvent qu'ARM est prêt pour le centre de données
  • Nvidia abaisse la barrière à l’entrée dans l’IA avec Fleet Command et LaunchPad
  • Lisez les « écritures synthétiques » étrangement belles d’un IA. qui pense que c'est Dieu
  • Le LaMDA de Google est un langage intelligent d'IA. pour mieux comprendre la conversation

Améliorez votre style de vieDigital Trends aide les lecteurs à garder un œil sur le monde en évolution rapide de la technologie avec toutes les dernières nouvelles, des critiques de produits amusantes, des éditoriaux perspicaces et des aperçus uniques.