Huaweis A.I. Har fullført den uferdige symfonien, og vi har hørt den

Franz Schubert komponerte sin Symfoni nr.8 i 1822, men fullførte den aldri, og gjorde bare to bevegelser sammen med en omriss av en tredje. Nesten 200 år senere, Huawei, Emmy-belønnet komponist Lucas Cantor, og kunstig intelligens (A.I.) inne i Mate 20 Pro smarttelefonen har gjort det den anerkjente komponisten ikke gjorde. De har fullført den uferdige symfonien.

Prosjektet er en fortsatt illustrasjon av ikke bare kraften til Huawei Kirin 980 prosessor og Dual-Neural Processing Unit (NPU) kunstig intelligensakselerator, men også potensialet for bruk av A.I. i varierte kreative prosjekter. Vi er kjent med A.I. moduser på smarttelefon kameraer, og Huawei har tidligere demonstrert kraften og hastigheten til sin A.I. i en selvkjørende bil, der en telefon ble brukt til å identifisere og hjelpe til med å unngå hindringer.

Det er vel et helt annet forslag å fullføre Schuberts symfoni nr. 8? Kan en smarttelefon og A.I. virkelig fullføre et av de mest kjente uferdige musikalske verkene, og gjøre det på en måte som vi ønsker å høre? Digital Trends deltok på den første offentlige fremføringen av det ferdige verket i London, og snakket med Lucas Cantor og Huawei om dette fascinerende prosjektet.

Teknologien

Hvor mye kostet Huawei Mate 20 Pro og dens A.I. bidra?

"Hele melodien [for tredje og fjerde sats] ble komponert ved hjelp av kunstig intelligens og Mate 20 Pro," sa Huaweis leder for håndsettporteføljen, Arne Herkelmann, til Digital Trends.

Telefonen og brikkesettet er helt umodifisert, og nøyaktig det samme som Mate 20 Pro du kan ha i lomma. Men Huawei laget en spesifikk A.I. modell for å forstå og utvikle musikken, som fikk Schuberts første og andre bevegelser, og deretter ved å analysere klangen, tonehøyden og meteren til musikken, genererte den den tredje og fjerde bevegelser.

Trening av A.I. var nesten som å sende den til skolen, bare med laserfokus på et enkelt emne — lag musikk som Schubert. MIDI-filer ble brukt, i stedet for skolebøker, hvorfra den lærte mønstre og struktur. Huawei genererte 20 forskjellige modeller i løpet av det seks måneder lange prosjektet, før de bestemte seg for en siste, i løpet av denne tiden har A.I. fikk rundt 90 stykker av Schuberts verk som referanse.

«I begynnelsen var alt Schubert, så A.I. kunne forstå hva Schubert gjorde," sa Herkelmann. "I den senere prosessen trente vi det også på komponister vi visste påvirket Schubert for å sikre at det var denne rikere bakgrunnen og konteksten til verket."

Denne tilnærmingen hjalp A.I. bedre forstå sin oppgave. Den trengte også trening for å sikre at den kom opp med en melodi som passet for Schubert, og ikke plutselig gjorde en melodi som passet bedre til en bisarr popversjon av Schuberts uferdige symfoni.

Da melodien ble levende, var det komponisten Lucas Cantors jobb å orkestrere stykket, gi det følelser og hjelpe til med å lære A.I. og rette opp feilene. Det tok ham bare 30 dager å komme opp med den fullførte tredje og fjerde satsen av den åttende symfonien. Han kalte dette en ellers umulig tidsramme uten A.I.

Komponisten

Lucas Cantor er en Emmy-belønnet komponist som for tiden skriver musikk for blant annet DreamWorks Animation, og han viste seg å være den ideelle mannen for jobben. Lenge før prosjektet var hans personlige interesse for kunstig intelligens grunnlaget for et vennskap med en av ingeniørene jobber med Huaweis A.I., et tilfeldig møte som til slutt førte til at selskapet kontaktet ham for å fullføre den uferdige symfonien ved hjelp av A.I.

"Jeg tror jeg svarte 'ja' før jeg i det hele tatt var ferdig med å lese e-posten," lo Cantor og beskrev måten han ble involvert på. "Jeg var begeistret over potensialet."

Selv om ideen om å bruke kunstig intelligens og teknologi for å skape, forbedre eller forsterke musikk høres futuristisk ut, har den pågått i en eller annen form i flere tiår.

"Teknologien jeg bruker for å uttrykke meg musikalsk er digital," sa Cantor, "og jeg kunne ikke uttrykke meg så raskt uten den. Jeg tror at hvis Schubert hadde hatt det, ville han vært 10 ganger mer produktiv.»

Det er lett å avfeie A.I., eller kanskje til og med Cantor, som en sovende partner - at den ene var mer innflytelsesrik enn den andre. Så hva var splittelsen? Hvor mye av det ferdige stykket er Cantor, og hvor mye er Huaweis A.I.?

"Det er et samarbeid, som ethvert musikkstykke," sa han. «Jeg har samarbeidet med mennesker på omtrent samme måte som jeg gjorde A.I.; A.I. genererte melodier, først og fremst hva den trodde ville være indikativ for Schubert, eller hva Schubert kan ha funnet på.»

Følelsen

Det Cantor kommer med er forståelse, erfaring og følelser - ting som A.I. er ikke i stand til å replikere.

"Det du hører er en samling av mange års ekspertise," sa han og snakket om seg selv, dirigenten, musikerne og Huaweis teknologiske kunnskap. Den ene hadde ikke klart det uten den andre.

"Smarttelefonen kunne ikke ha skrevet det uten meg, men det ville ikke vært det samme stykket uten smarttelefon," sa han, og sa at det var som å jobbe med "den ultimate idédugnadspartneren." «Jeg begynte ikke å skrive før jeg så hva A.I. ha gjort. Jeg hadde noen ideer om hvordan den uferdige symfonien ville gå, en ramme av formen. Første gang jeg hørte melodiene laget av smarttelefon, ble jeg slått av hvor interessante de var. Det er denne ene melodien i tredje sats som har en stor terts som går til en moll terts som gjør den virkelig skummel, men veldig vakker. Det er ikke en melodi jeg ville ha kommet på.»

Jo dypere vi snakket om måten bevegelsene var blitt til, jo mer avslørte Cantor om A.I.s evner.

"Den følelsesmessige dybden i de to siste bevegelsene er noe jeg tok med, men i en retning som smarttelefonen og jeg kartla sammen. Jeg ble truffet av smarttelefon genererte melodier som ikke passer for 1822, men syntes likevel å passe stykket veldig bra. Det var et sprang som smarttelefon laget, og jeg fulgte den. Jeg syntes det var en god idé."

Fascinerende, Cantor snakker om å begynne å danne et forhold til smarttelefonen og A.I. På ganger gjennom samtalen vår snakket han om det på en måte som man kan snakke om en annen med person.

"Jeg vet at det ikke har følelser, men jeg fortsetter å tilskrive det følelser," sa han og lo.

Så uvanlig som det høres ut, kan dette ha hatt en interessant effekt på det ferdige stykket.

"Jeg tilskrev følelser til det hjalp meg å få et mer robust kreativt produkt ut av det," sa Cantor.

Den ferdige symfonien

Fremført på Londons Cadogan Hall i prestisjetunge Chelsea på 67-tallet English Session Orchestra, varte det ferdige stykket i 48 minutter, sammenlignet med de 27 minuttene i de to originale satsene. Hvis jeg ikke ble fortalt at tredje og fjerde bevegelse ble skapt av kunstig intelligens, ville jeg ikke ha visst det. Det var ingenting digitalt, generisk eller sjelløst med det.

Lekne, svevende og til tider ganske episke, Cantors A.I.-genererte bevegelser overførte motiver fra Schuberts originale satser, og klarte å tilføre unike elementer til dem. Ikke som musikkritiker, eller klassisk musikkekspert, er det vanskelig å si hvor godt de nye bevegelsene "passer" med originalene, men det er egentlig ikke poenget.

Ingen i teamet satte seg fore å lage den endelige ferdige versjonen av den uferdige symfonien, og det er heller ikke første gang stykket har blitt fullført av andre musikere.

Svaret på om det var en suksess eller ikke, vil være subjektivt. Imidlertid kan vi si at et minneverdig, emosjonelt musikkstykke ble skapt. Vi burde egentlig ikke være overrasket over at det fungerte så bra heller. Fra den elektroniske musikken til Jean Michel Jarre, band som Pet Shop Boys være kreativ aktivert av Atari ST-datamaskinen, og digitale vokalister som Hatsune Miku og Crypton Future Media annen Vocaloid-programvare som gir musikere sjansen til å lage musikk de ville normalt ikke være i stand til det – musikk og høyteknologi har smeltet sammen på fascinerende nye måter i årevis.

Fremtiden

Hva vil A.I. mener du å fullføre den uferdige symfonien? Er det et rent reklameverktøy for Huawei, som viser frem A.I. talent, eller er det noe mer? Mens vi tviler på at Huawei vil begynne å fullføre de mange andre uferdige stykkene der ute, er musikkindustrien allerede oppmerksom på mulighetene. Singer-songwriter Taryn Southern brukte A.I. programmer å produsere henne Jeg er AI album, for eksempel.

Potensialet for kunstig intelligens for å bli brukt i kreative scenarier blir sett på tvers av alle bransjer, ikke bare musikk. Malerier laget av A.I. har solgt for hundretusenvis av dollar, A.I. i smarttelefonene våre hjelper oss å bli bedre fotografer, og A.I. i redigeringsverktøy hjelper både profesjonelle og amatører med å få bilder til å se enda bedre ut. Kunstig intelligens er allerede en kreativ kraft.

Vi spurte Cantor om dette var en engangsting for ham.

"Jeg håper absolutt at det ikke er siste gang [jeg samarbeider med A.I.], det har vært fantastisk," sa han.

Men hva med den bredere virkningen av musikk og kunstig intelligens som kommer sammen? Han kom med en spennende spådom.

"Om noen år tror jeg ikke det vil være uvanlig i det hele tatt å komponere musikk på denne måten," sa Cantor.

Redaktørenes anbefalinger

• Huaweis Kirin 990-prosessor har 5G, A.I. overbelastning, og 10 milliarder transistorer
• Fra 8K til A.I., dette er hva som kan komme til kameraer i 2019