Huaweis A.I. Har avslutat den oavslutade symfonin, och vi har hört den

Franz Schubert komponerade hans Symfoni nr 8 1822, men fullbordade den aldrig och gjorde bara två rörelser tillsammans med en kontur av en tredje. Nästan 200 år senare, Huawei, Emmy-belönad kompositör Lucas Cantor, och artificiell intelligens (A.I.) inuti Mate 20 Pro smartphone har gjort vad den berömda kompositören inte gjorde. De har avslutat den ofullbordade symfonin.

Projektet är en fortsatt illustration av inte bara kraften hos Huawei Kirin 980-processor och Dual-Neural Processing Unit (NPU) accelerator för artificiell intelligens, men också potentialen för att använda A.I. i olika kreativa projekt. Vi är bekanta med A.I. lägen på smartphone kameror, och Huawei har tidigare visat kraften och hastigheten hos sin A.I. i en självkörande bil, där en telefon användes för att identifiera och hjälpa till att undvika hinder.

Visst är det ett helt annat förslag att fullborda Schuberts symfoni nr 8? Kan en smartphone och A.I. verkligen avsluta ett av de mest kända oavslutade musikverken och göra det på ett sätt som vi skulle vilja höra? Digital Trends deltog i den första offentliga föreställningen någonsin av det färdiga verket i London och pratade med Lucas Cantor och Huawei om detta fascinerande projekt.

Teknologin

Hur mycket kostade Huawei Mate 20 Pro och dess A.I. bidra?

"Hela melodin [för tredje och fjärde satsen] komponerades med hjälp av artificiell intelligens och Mate 20 Pro," sa Huaweis chef för telefonportfölj, Arne Herkelmann, till Digital Trends.

Telefonen och dess styrkrets är helt omodifierade och exakt samma som Mate 20 Pro du kanske har i fickan. Men Huawei gjorde en specifik A.I. modell för att förstå och utveckla musiken, som fick Schuberts första och andra rörelser, och sedan genom att analysera musikens klang, tonhöjd och meter genererade den den tredje och fjärde rörelser.

Utbildning av A.I. var nästan som att skicka den till skolan, bara med laserfokus på ett enda ämne — gör musik som Schubert. MIDI-filer användes, snarare än skolböcker, från vilka den lärde sig mönster och struktur. Huawei genererade 20 olika modeller under sexmånadersprojektet, innan de bestämde sig för en sista, under vilken tid A.I. fick ett 90-tal stycken av Schuberts verk som referens.

"I början var allt Schubert, så A.I. kunde förstå vad Schubert gjorde”, sa Herkelmann. "I den senare processen utbildade vi det också på kompositörer som vi visste påverkade Schubert för att se till att det fanns denna rikare bakgrund och sammanhang till verket."

Detta tillvägagångssätt hjälpte A.I. bättre förstå sin uppgift. Den behövde också träning för att se till att den kom fram till en melodi som lämpade sig för Schubert, och att den inte plötsligt gjorde en melodi bättre lämpad för en bisarr popversion av Schuberts ofullbordade symfoni.

När melodin kom till liv var det kompositören Lucas Cantors jobb att orkestrera stycket, ge det känslor och att hjälpa till att lära A.I. och rätta till sina misstag. Det tog honom bara 30 dagar att komma med den färdiga tredje och fjärde satsen av den 8:e symfonin. Han kallade detta en annars omöjlig tidsram utan A.I.

Kompositören

Lucas Cantor är en Emmy-belönt kompositör som för närvarande skriver musik för bland annat DreamWorks Animation, och han visade sig vara den idealiska mannen för jobbet. Långt före projektet låg hans personliga intresse för artificiell intelligens till grund för en vänskap med en av ingenjörerna arbetade på Huaweis A.I., ett slumpmässigt möte som så småningom ledde till att företaget kontaktade honom för att avsluta den oavslutade symfonin med hjälp av A.I.

"Jag tror att jag svarade "ja" innan jag ens läst klart mejlet," skrattade Cantor och beskrev hur han blev involverad. "Jag var exalterad över potentialen."

Även om idén att använda artificiell intelligens och teknik för att skapa, förbättra eller förstärka musik låter futuristisk, har den pågått i en eller annan form i decennier.

"Tekniken jag använder för att uttrycka mig musikaliskt är helt digital," sa Cantor, "och jag kunde inte uttrycka mig så snabbt utan den. Jag tror att om Schubert hade det, skulle han ha varit 10 gånger mer produktiv."

Det är lätt att avfärda A.I., eller kanske till och med Cantor, som en sovande partner - att den ena var mer inflytelserik än den andra. Så vad var splittringen? Hur mycket av det färdiga verket är Cantor, och hur mycket är Huaweis A.I.?

"Det är ett samarbete, som vilken musik som helst", sa han. "Jag har samarbetat med människor på ungefär samma sätt som jag gjorde A.I.; A.I. genererade melodier, främst vad den trodde skulle vara indikativ för Schubert, eller vad Schubert kan ha kommit på."

Känslan

Vad Cantor kommer med är förståelse, erfarenhet och känslor - saker som A.I. inte kan replikera.

"Det du hör är en sammankomst av många års expertis," sa han och talade om sig själv, dirigenten, musikerna och Huaweis tekniska kunskap. Den ena hade inte kunnat göra det utan den andra.

"Smarttelefonen kunde inte ha skrivit det utan mig, men det hade inte varit samma stycke utan smartphone", sa han och sa att det var som att arbeta med "den ultimata brainstorming-partnern." "Jag började inte skriva förrän jag såg vad A.I. hade gjort. Jag hade några idéer om hur den ofullbordade symfonin skulle gå till, en ram av formen. Första gången jag hörde melodierna gjorda av smartphone, Jag slogs av hur intressanta de var. Det finns den här melodin i tredje satsen som har en stor terts som går till en moll terts som gör den riktigt kuslig, men väldigt vacker. Det är inte en melodi jag skulle ha kommit på."

Ju djupare vi talade om hur rörelserna hade skapats, desto mer avslöjade Cantor om A.I: s förmåga.

"Det känslomässiga djupet i de två sista rörelserna är något som jag tog med, men i en riktning som smartphonen och jag kartlade tillsammans. Jag slogs av smartphone genererade melodier som inte var lämpliga för 1822, men verkade ändå passa stycket riktigt bra. Det var ett språng som smartphone gjorde, och jag följde den. Jag tyckte det var en bra idé."

Fascinerande nog talar Cantor om att börja bilda en relation med smarttelefonen och A.I. På gånger under vårt samtal talade han om det på ett sätt som man kan prata om en annan med person.

"Jag vet att det inte har känslor, men jag fortsätter att tillskriva det känslor", sa han och skrattade.

Hur ovanligt det än låter, kan detta ha haft en intressant effekt på det färdiga stycket.

"Att tillskriva känslor till det hjälpte mig att få ut en mer robust kreativ produkt ur det," sa Cantor.

Den färdiga symfonin

Uppträdde på Londons Cadogan Hall i prestigefyllda Chelsea av 67-delarna English Session Orchestra, varade det färdiga stycket i 48 minuter, jämfört med de 27 minuterna i de två ursprungliga satserna. Om jag inte fått veta att den tredje och fjärde rörelsen skapades av artificiell intelligens, skulle jag inte ha vetat det. Det fanns inget digitalt, generiskt eller själlöst med det.

Lekfulla, svävande och ibland ganska episka, Cantors A.I.-genererade satser överförde motiv från Schuberts originalsatser och lyckades tillföra unika element till dem. Att inte vara musikkritiker eller klassisk musikexpert är det svårt att säga hur väl de nya rörelserna "passar" med originalen, men det är inte riktigt poängen.

Ingen i teamet satte sig för att skapa den definitiva färdiga versionen av den ofullbordade symfonin, och det är inte första gången som stycket har fullbordats av andra musiker heller.

Svaret på om det var en framgång eller inte, kommer att vara subjektivt. Men vi kan säga att ett minnesvärt, känslosamt musikstycke skapades. Vi borde egentligen inte bli förvånade över att det fungerade så bra heller. Från elektronisk musik av Jean Michel Jarre, band som Pet Shop Boys vara kreativt aktiverad av Atari ST-datorn, och digitala sångare som Hatsune Miku och Crypton Future Medias annan Vocaloid-programvara som ger musiker chans att göra musik de skulle normalt inte kunna – musik och högteknologi har konvergerat på fascinerande nya sätt i flera år.

Framtiden

Vad kommer A.I. menar du att avsluta den oavslutade symfonin? Är det enbart ett reklamverktyg för Huawei, som visar upp dess A.I. talang, eller finns det något mer? Även om vi tvivlar på att Huawei kommer att börja slutföra de många andra oavslutade bitarna där ute, uppmärksammar musikindustrin redan möjligheterna. Sångare låtskrivare Taryn Southern använde A.I. program att producera henne Jag är AI album, till exempel.

Potentialen för artificiell intelligens att användas i kreativa scenarier ses inom alla branscher, inte bara musik. Målningar gjorda av A.I. har sålt för hundratusentals dollar, A.I. i våra smartphones hjälper oss att bli bättre fotografer, och A.I. i redigeringsverktyg hjälper både proffs och amatörer att få bilder att se ännu bättre ut. Artificiell intelligens är redan en kreativ kraft.

Vi frågade Cantor om detta var en engångsgrej för honom.

"Jag hoppas verkligen att det inte är sista gången [jag samarbetar med A.I.], det har varit fantastiskt," sa han.

Men hur är det med den bredare effekten av musik och artificiell intelligens som går ihop? Han gjorde en spännande förutsägelse.

"Om några år tror jag inte att det alls kommer att vara ovanligt att komponera musik på det här sättet," sa Cantor.

Redaktörens rekommendationer

• Huaweis Kirin 990-processor har 5G, A.I. överbelastning och 10 miljarder transistorer
• Från 8K till A.I., detta är vad som kan komma till kameror under 2019