IA de Stanford Assiste à animação silenciada e reproduz o som que faria

[SIGGRAPH 2018] [Destaques] Rumo à síntese sonora baseada em ondas para animação por computador

Nos primórdios do cinema, os organistas acrescentavam efeitos sonoros aos filmes mudos, acompanhando o que acontecia na tela. Avançamos para 2018 e uma variação dessa ideia forma a base de um novo trabalho realizado por cientistas da computação da Universidade de Stanford. Eles desenvolveram um inteligência artificial sistema que é capaz de sintetizar sons realistas para animação por computador com base inteiramente nas imagens que vê e no seu conhecimento do mundo físico. Os resultados são sons sintetizados com o toque de um botão.

Vídeos recomendados

“Desenvolvemos o primeiro sistema para sintetizar sons automaticamente para acompanhar animações de computador baseadas na física”, Jui-Hsien Wang, um estudante de pós-graduação do Instituto de Engenharia Computacional e Matemática (ICME) de Stanford, disse à Digital Trends. “Nossa abordagem é geral, [o que significa que] pode computar fontes sonoras realistas para uma ampla gama de animações. fenômenos - como corpos sólidos como uma tigela de cerâmica ou um prato flexível, bem como líquido sendo derramado em um copo."

A tecnologia que faz o sistema funcionar é bastante inteligente. Leva em consideração a posição variável dos objetos na cena conforme montados durante o processo de modelagem 3D. Ele identifica o que são e, em seguida, prevê como eles afetarão os sons produzidos, seja para refleti-los, dispersá-los, r ou difrá-los.

Relacionado

  • A fórmula engraçada: por que o humor gerado por máquina é o Santo Graal da IA
  • A nova voz A.I. da Nvidia parece uma pessoa real
  • A IA pode vencer os engenheiros humanos no projeto de microchips? Google pensa assim

“Uma coisa excelente sobre nossa abordagem é que nenhum dado de treinamento é necessário”, continuou Wang. “Ele simula o som a partir dos primeiros princípios físicos.”

Além de ajudar a adicionar mais rapidamente efeitos sonoros a filmes animados, a tecnologia também pode ajudar dia pode ser usado para ajudar os designers a descobrir como os produtos soarão antes de serem fisicamente produzido.

Não há informações sobre quando esta ferramenta poderá ser disponibilizada publicamente, mas Wang disse que a equipe está atualmente “explorando opções para tornar a ferramenta acessível”. Antes disso chega a esse ponto, no entanto, os pesquisadores querem melhorar a capacidade do sistema de modelar objetos mais complexos, como os exuberantes tons reverberantes de um Stradivarius. violino.

A pesquisa será apresentada como parte da ACM SIGGRAPH 2018, a conferência líder mundial em computação gráfica e técnicas interativas. Reserve um segundo para sentir pena do pobre artista foley da Pixar no fundo do corredor que acabou de comprar uma casa nova!

Recomendações dos Editores

  • IA analógica? Parece loucura, mas pode ser o futuro
  • O mais recente A.I. da Nvidia os resultados provam que o ARM está pronto para o data center
  • Nvidia reduz a barreira de entrada na IA com Comando de Frota e LaunchPad
  • Leia a estranhamente bela “escritura sintética” de uma IA. que pensa que é Deus
  • O LaMDA do Google é uma linguagem inteligente de IA. para entender melhor a conversa

Atualize seu estilo de vidaDigital Trends ajuda os leitores a manter o controle sobre o mundo acelerado da tecnologia com as últimas notícias, análises divertidas de produtos, editoriais criteriosos e prévias únicas.