IA da Huawei Terminou a sinfonia inacabada e nós a ouvimos

Franz Schubert compôs seu Sinfonia nº 8 em 1822, mas nunca o completou, fazendo apenas dois movimentos juntamente com o esboço de um terceiro. Quase 200 anos depois, Huawei, compositor premiado com o Emmy Lucas Cantore inteligência artificial (IA) dentro do Companheiro 20 Pró smartphone fizeram o que o renomado compositor não fez. Eles terminaram a sinfonia inacabada.

O projeto é uma ilustração contínua não apenas do poder da Huawei Processador Kirin 980 e acelerador de inteligência artificial de unidade de processamento neural duplo (NPU), mas também o potencial para usar IA. em projetos criativos variados. Estamos familiarizados com IA. modos ativados Smartphone câmeras, e a Huawei já demonstrou o poder e a velocidade de seu A.I. em um carro autônomo, onde foi utilizado um telefone para identificar e ajudar a evitar obstáculos.

Certamente, completar a Sinfonia nº 8 de Schubert é uma proposta totalmente diferente? Um smartphone e I.A. integrado podem ser usados? realmente terminar uma das mais famosas obras musicais inacabadas, e fazê-lo de uma forma que gostaríamos de ouvir? A Digital Trends assistiu à primeira apresentação pública da peça concluída em Londres e conversou com Lucas Cantor e Huawei sobre este projeto fascinante.

A tecnologia

Quanto custou o Huawei Mate 20 Pro e seu A.I. contribuir?

“Toda a melodia [para o terceiro e quarto movimentos] foi composta usando inteligência artificial e o Mate 20 Pro”, disse o chefe do portfólio de aparelhos da Huawei, Arne Herkelmann, à Digital Trends.

O telefone e seu chipset não foram modificados e são exatamente iguais ao Companheiro 20 Pró você pode ter no bolso. Mas a Huawei criou uma IA específica. modelo para compreender e desenvolver a música, ao qual Schubert deu o primeiro e o segundo movimentos e, em seguida, analisando o timbre, a altura e a métrica da música, gerou o terceiro e o quarto movimentos.

Treinando a IA foi quase como mandá-lo para a escola, apenas com foco em um único assunto - fazer música como Schubert. Foram usados ​​arquivos MIDI, em vez de livros escolares, com os quais aprendeu padrões e estrutura. A Huawei gerou 20 modelos diferentes ao longo do projeto de seis meses, antes de decidir por um modelo final, durante o qual o A.I. recebeu como referência cerca de 90 peças da obra de Schubert.

“No início era tudo Schubert, então o A.I. poderia entender o que Schubert fez”, disse Herkelmann. “No processo posterior, também treinamos compositores que sabíamos que influenciaram Schubert para garantir que houvesse uma formação e contexto mais ricos para a obra.”

Essa abordagem ajudou o A.I. compreender melhor a sua tarefa. Também precisava de treinamento para ter certeza de que criaria uma melodia adequada para Schubert e não criaria de repente uma melodia mais adequada para uma versão pop bizarra da sinfonia inacabada de Schubert.

À medida que a melodia ganhava vida, coube ao compositor Lucas Cantor orquestrar a peça, dar-lhe emoção e ajudar a ensinar a IA. e corrigir seus erros. Ele levou apenas 30 dias para concluir o terceiro e quarto movimentos da 8ª Sinfonia. Ele chamou isso de um período de tempo impossível sem a IA.

O compositor

Lucas Cantor é um compositor vencedor do Emmy que atualmente escreve músicas para a DreamWorks Animation, entre outros projetos, e acabou sendo o homem ideal para o trabalho. Muito antes do projeto, seu interesse pessoal por inteligência artificial serviu de base para uma amizade com um dos engenheiros trabalhando na IA da Huawei, uma reunião fortuita que acabou levando a empresa a contatá-lo para terminar a sinfonia inacabada usando IA

“Acho que respondi ‘sim’ antes mesmo de terminar de ler o e-mail”, riu Cantor, descrevendo a forma como se envolveu. “Fiquei entusiasmado com o potencial.”

Embora a ideia de usar inteligência artificial e tecnologia para criar, aprimorar ou aumentar a música pareça futurista, ela vem acontecendo de uma forma ou de outra há décadas.

“A tecnologia que uso para me expressar musicalmente é totalmente digital”, disse Cantor, “e eu não conseguiria me expressar tão rapidamente sem ela. Acho que se Schubert tivesse conseguido, ele teria sido 10 vezes mais prolífico.”

É fácil descartar a IA, ou talvez até mesmo Cantor, como um parceiro adormecido – aquele era mais influente que o outro. Então, qual foi a divisão? Quanto da peça concluída é Cantor e quanto é IA da Huawei?

“É uma colaboração, como qualquer peça musical”, disse ele. “Colaborei com os humanos da mesma forma que fiz com a IA; a IA gerou melodias, principalmente o que pensava ser indicativo de Schubert, ou o que Schubert pode ter inventado.

A emoção

O que Cantor traz é compreensão, experiência e emoção – coisas que a IA. não consegue replicar.

“O que vocês estão ouvindo é uma união de muitos anos de experiência”, disse ele, falando sobre si mesmo, o maestro, os músicos e o conhecimento tecnológico da Huawei. Um não poderia ter feito isso sem o outro.

“O smartphone não poderia ter escrito sem mim, mas não teria sido a mesma peça sem o Smartphone”, disse ele, dizendo que era como trabalhar com o “parceiro definitivo de brainstorming”. “Não comecei a escrever até ver o que a IA estava fazendo. feito. Eu tinha algumas ideias de como seria a sinfonia inacabada, uma estrutura da forma. A primeira vez que ouvi as melodias feitas pelo Smartphone, Fiquei impressionado com o quão interessantes eles eram. Há uma melodia no terceiro movimento que tem uma terça maior indo para uma terça menor, o que a torna realmente estranha, mas muito bonita. Não é uma melodia que eu teria inventado.”

Quanto mais conversávamos sobre a forma como os movimentos foram criados, mais Cantor revelava sobre a capacidade da IA.

“A profundidade emocional nos dois últimos movimentos é algo que eu trouxe, mas numa direção que o smartphone e eu traçamos juntos. Fiquei impressionado com o Smartphone gerando melodias não apropriadas para 1822, mas ainda assim pareciam se encaixar muito bem na peça. Esse foi um salto que o Smartphone fiz, e eu o segui. Eu pensei que era uma ótima idéia."

De forma fascinante, Cantor fala sobre como começar a formar um relacionamento com o smartphone e a IA. No vezes durante nossa conversa, ele falou sobre isso de uma maneira que alguém pode falar sobre outro pessoa.

“Eu sei que não tem sentimentos, mas continuo atribuindo sentimentos a ele”, disse ele, rindo.

Por mais incomum que pareça, isso pode ter tido um efeito interessante na peça final.

“Atribuir sentimentos a isso me ajudou a obter dele um produto criativo mais robusto”, disse Cantor.

A sinfonia acabada

Apresentou-se no London’s Salão Cadogan no prestigiado Chelsea pelos 67 integrantes Orquestra de Sessão Inglesa, a peça concluída durou 48 minutos, em comparação com os 27 minutos dos dois movimentos originais. Se não me dissessem que o terceiro e o quarto movimentos foram criados por inteligência artificial, eu não saberia. Não havia nada digital, genérico ou sem alma nisso.

Lúdicos, elevados e às vezes bastante épicos, os movimentos gerados pela IA de Cantor carregaram motivos dos movimentos originais de Schubert e conseguiram adicionar elementos únicos a eles. Não sendo um crítico musical ou um especialista em música clássica, é difícil dizer até que ponto os novos movimentos “se ajustam” aos originais, mas esse não é realmente o ponto.

Nenhum membro da equipe se propôs a criar a versão final definitiva da sinfonia inacabada, e também não é a primeira vez que a peça é concluída por outros músicos.

A resposta sobre se foi um sucesso ou não será subjetiva. No entanto, podemos dizer que foi criada uma peça musical memorável e emocionante. Também não deveríamos ficar surpresos por ter funcionado tão bem. Da música eletrônica de Jean Michel Jarre, bandas como o Pet Shop Meninos sendo criativamente habilitado pelo computador Atari STe vocalistas digitais como Hatsune Miku e Crypton Future Media's outro software Vocaloid dando aos músicos a chance de fazer música normalmente não conseguiriam – a música e a alta tecnologia têm convergido de maneiras novas e fascinantes há anos.

O futuro

O que será a IA? terminar a Sinfonia Inacabada significa? É puramente uma ferramenta promocional para a Huawei, apresentando sua I.A. talento ou há algo mais? Embora duvidemos que a Huawei comece a terminar muitas outras peças inacabadas que existem, a indústria musical já está prestando atenção às possibilidades. Cantor e compositor Taryn Southern usou IA programas para produzi-la Eu sou IA álbum, por exemplo.

O potencial da inteligência artificial para ser usada em cenários criativos está sendo visto em todos os setores, não apenas na música. Pinturas feitas por A.I. foram vendidos por centenas de milhares de dólares, A.I. em nossos smartphones está nos ajudando a ser melhores fotógrafos e IA em ferramentas de edição está ajudando profissionais e amadores a tornar as imagens ainda melhores. A inteligência artificial já é uma força criativa.

Perguntamos a Cantor se isso era uma coisa única para ele.

“Certamente espero que não seja a última vez [que colaboro com a IA], foi fantástico”, disse ele.

Mas e quanto ao impacto mais amplo da união da música e da inteligência artificial? Ele fez uma previsão emocionante.

“Em alguns anos, não acho que será nada incomum compor música dessa maneira”, disse Cantor.

Recomendações dos Editores

• O processador Kirin 990 da Huawei possui 5G, A.I. sobrecarga e 10 bilhões de transistores
• De 8K a IA, isso é o que pode chegar às câmeras em 2019