Franz Schubert componeerde de zijne Symfonie nr.8 in 1822, maar voltooide het nooit, waarbij slechts twee delen werden gemaakt samen met een schets van een derde. Bijna 200 jaar later, Huawei, een Emmy-bekroonde componist Lucas Cantoren kunstmatige intelligentie (A.I.) binnen de Mate 20 Pro smartphone hebben gedaan wat de beroemde componist niet deed. Ze hebben de onvoltooide symfonie voltooid.
Inhoud
- De technologie
- De componist
- De emotie
- De voltooide symfonie
- De toekomst
Het project is een voortdurende illustratie van niet alleen de kracht van Huawei Kirin 980-processor en Dual-Neural Processing Unit (NPU) kunstmatige intelligentieversneller, maar ook het potentieel voor het gebruik van A.I. in gevarieerde creatieve projecten. Wij zijn bekend met A.I. modi ingeschakeld smartphone camera's, en Huawei heeft eerder de kracht en snelheid van zijn A.I. in een zelfrijdende auto, waarbij een telefoon werd gebruikt om obstakels te identificeren en te helpen vermijden.
Het voltooien van Schuberts Nr. 8 Symfonie is toch zeker een heel ander voorstel? Kunnen een smartphone en ingebouwde A.I. een van de beroemdste onvoltooide muziekwerken echt afmaken, en dat op een manier die we graag willen horen? Digital Trends woonde de allereerste publieke uitvoering van het voltooide stuk in Londen bij en sprak met Lucas Cantor en Huawei over dit fascinerende project.
Verwant
- De volgende grote uitdaging voor Google’s A.I. is een kaartspel waar je nog nooit van hebt gehoord
- De Helio P90-chip van MediaTek heeft meer A.I. technologie dan de gehele Terminator-franchise
De technologie
Hoeveel hebben de Huawei Mate 20 Pro en zijn A.I. bijdragen?
“De hele melodie [voor het derde en vierde deel] is gecomponeerd met behulp van kunstmatige intelligentie en de Mate 20 Pro”, vertelde Huawei’s hoofd van de handsetportfolio, Arne Herkelmann, aan Digital Trends.
De telefoon en de chipset zijn volledig ongewijzigd en precies hetzelfde als de Mate 20 Pro die u wellicht in uw zak heeft. Maar Huawei heeft een specifieke A.I. model om de muziek te begrijpen en te ontwikkelen, die Schuberts eerste en tweede kreeg bewegingen, en door vervolgens het timbre, de toonhoogte en het metrum van de muziek te analyseren, genereerde het de derde en vierde bewegingen.
Het trainen van de A.I. Het was bijna alsof je het naar school stuurde, alleen met een laserfocus op één enkel onderwerp: muziek maken zoals Schubert. Er werden MIDI-bestanden gebruikt in plaats van schoolboeken, waaruit patronen en structuur werden geleerd. Huawei heeft gedurende het zes maanden durende project twintig verschillende modellen gegenereerd, voordat ze tot een laatste model kwamen, gedurende welke tijd de A.I. kreeg ongeveer 90 stukken van Schuberts werk als referentie.
“Ik denk dat ik ‘ja’ heb geantwoord voordat ik de e-mail zelfs maar had gelezen.”
“In het begin was het allemaal Schubert, dus de A.I. Ik kon begrijpen wat Schubert deed”, zei Herkelmann. “In het latere proces hebben we het ook getraind op componisten waarvan we wisten dat ze Schubert beïnvloedden om er zeker van te zijn dat er een rijkere achtergrond en context voor het werk was.”
Deze aanpak hielp de A.I. zijn taak beter begrijpen. Het had ook training nodig om ervoor te zorgen dat het een melodie bedacht die geschikt was voor Schubert, en dat het niet plotseling een melodie maakte die beter geschikt was voor een bizarre popversie van Schuberts onvoltooide symfonie.
Toen de melodie tot leven kwam, was het de taak van componist Lucas Cantor om het stuk te orkestreren, het emotie te geven en de A.I. en corrigeer zijn fouten. Het kostte hem slechts 30 dagen om het voltooide derde en vierde deel van de 8e symfonie te bedenken. Hij noemde dit een anders onmogelijk tijdsbestek zonder de AI.
De componist
Lucas Cantor is een met een Emmy bekroonde componist die momenteel muziek schrijft voor onder meer DreamWorks Animation, en hij bleek de ideale man voor de klus. Lang vóór het project vormde zijn persoonlijke interesse in kunstmatige intelligentie de basis voor een vriendschap met een van de ingenieurs werken aan de AI van Huawei, een toevallige ontmoeting die er uiteindelijk toe leidde dat het bedrijf contact met hem opnam om de onvoltooide symfonie af te maken met behulp van AI
“Ik denk dat ik ‘ja’ heb geantwoord voordat ik de e-mail zelfs maar had gelezen”, lachte Cantor, terwijl hij de manier beschreef waarop hij erbij betrokken raakte. “Ik was enthousiast over het potentieel.”
Hoewel het idee om kunstmatige intelligentie en technologie te gebruiken om muziek te creëren, te verbeteren of uit te breiden futuristisch klinkt, bestaat het al tientallen jaren in een of andere vorm.
“De technologie die ik gebruik om mezelf muzikaal uit te drukken is volledig digitaal,” zei Cantor, “en zonder deze technologie zou ik mezelf niet zo snel kunnen uiten. Ik denk dat als Schubert het had gehad, hij tien keer productiever zou zijn geweest.
“Wat je hoort is het samenkomen van jarenlange expertise.”
Het is gemakkelijk om AI, of misschien zelfs Cantor, af te doen als een slapende partner – de een had meer invloed dan de ander. Dus wat was de splitsing? Hoeveel van het voltooide stuk is Cantor, en hoeveel is Huawei’s AI?
“Het is een samenwerking, zoals elk muziekstuk”, zei hij. “Ik heb op vrijwel dezelfde manier met mensen samengewerkt als met de AI; de A.I. genereerde melodieën, vooral wat het dacht dat indicatief zou zijn voor Schubert, of wat Schubert mogelijk had bedacht.
De emotie
Wat Cantor brengt is begrip, ervaring en emotie – dingen die de A.I. kan niet reproduceren.
“Wat je hoort is het samenkomen van vele jaren expertise”, zei hij, sprekend over zichzelf, de dirigent, de muzikanten en de technologische kennis van Huawei. Het een had het niet kunnen doen zonder het ander.
“Zonder mij had de smartphone het niet kunnen schrijven, maar zonder de smartphone zou het niet hetzelfde stuk zijn geweest
Hoe dieper we spraken over de manier waarop de bewegingen tot stand waren gekomen, hoe meer Cantor onthulde over het vermogen van de AI.
Als mij niet was verteld dat het derde en vierde deel door kunstmatige intelligentie zijn gecreëerd, zou ik het niet hebben geweten.
“De emotionele diepgang in de laatste twee delen is iets dat ik heb gebracht, maar in een richting die de smartphone en ik samen in kaart brachten. Ik werd getroffen door de
Fascinerend genoeg vertelt Cantor over het beginnen van een relatie met de smartphone en de A.I. Bij Tijdens ons gesprek sprak hij erover op een manier waarop de een over de ander kan praten persoon.
“Ik weet dat er geen gevoelens in zitten, maar ik blijf er gevoelens aan toeschrijven”, zei hij lachend.
Hoe ongebruikelijk het ook klinkt, dit kan een interessant effect hebben gehad op het voltooide stuk.
"Door er gevoelens aan toe te schrijven, kon ik er een robuuster creatief product uit halen", zei Cantor.
De voltooide symfonie
Uitgevoerd in Londen Cadogan-zaal in het prestigieuze Chelsea van het 67-stuk Engels sessieorkest, het voltooide stuk duurde 48 minuten, vergeleken met de 27 minuten van de oorspronkelijke twee delen. Als mij niet was verteld dat het derde en vierde deel door kunstmatige intelligentie zijn gecreëerd, zou ik het niet hebben geweten. Er was niets digitaals, generieks of zielloos aan.
Speels, zwevend en soms nogal episch, de door AI gegenereerde bewegingen van Cantor namen motieven uit de originele bewegingen van Schubert over en slaagden erin er unieke elementen aan toe te voegen. Omdat ik geen muziekcriticus of expert op het gebied van klassieke muziek ben, is het moeilijk te zeggen hoe goed de nieuwe delen ‘passen’ bij de originelen, maar daar gaat het niet echt om.
Niemand van het team was van plan om de definitief voltooide versie van de onvoltooide symfonie te creëren, en het is ook niet de eerste keer dat het stuk door andere muzikanten wordt voltooid.
Het antwoord of het een succes was of niet, zal subjectief zijn. Wel kunnen we stellen dat er een memorabel, emotioneel muziekstuk is ontstaan. Het hoeft ons ook niet te verbazen dat het zo goed werkte. Van de elektronische muziek van Jean Michel Jarre, bands als de Pet Shop Boys creatief zijn mogelijk gemaakt door de Atari ST-computer, en digitale vocalisten als Hatsune Miku en Crypton Future Media's andere Vocaloid-software die muzikanten de mogelijkheid biedt kans om muziek te maken normaal gesproken zouden ze dat niet kunnen – muziek en hightech komen al jaren op fascinerende nieuwe manieren samen.
De toekomst
Wat zal A.I. het afmaken van de onvoltooide symfonie betekent? Is het puur een promotiemiddel voor Huawei, waarin zijn A.I. talent, of is er meer? Hoewel we betwijfelen of Huawei de vele andere onvoltooide stukken zal gaan afwerken, besteedt de muziekindustrie al aandacht aan de mogelijkheden. Singer-songwriter Taryn Southern gebruikte AI. programma's om haar te produceren Ik ben AI album bijvoorbeeld.
Het potentieel voor het gebruik van kunstmatige intelligentie in creatieve scenario’s wordt in alle sectoren gezien, niet alleen in de muzieksector. Schilderijen gemaakt door A.I. voor honderdduizenden dollars verkocht, A.I. in onze smartphones helpt ons betere fotografen te worden, en AI in bewerkingstools helpt zowel professionals als amateurs om afbeeldingen er nog beter uit te laten zien. Kunstmatige intelligentie is al een creatieve kracht.
We vroegen Cantor of dit een eenmalig iets voor hem was.
“Ik hoop zeker dat dit niet de laatste keer is [dat ik samenwerk met AI], het was fantastisch”, zei hij.
Maar hoe zit het met de bredere impact van het samenkomen van muziek en kunstmatige intelligentie? Hij deed een spannende voorspelling.
"Over een paar jaar denk ik niet dat het ongebruikelijk zal zijn om op deze manier muziek te componeren", zei Cantor.
Aanbevelingen van de redactie
- Huawei's Kirin 990-processor heeft 5G, A.I. overbelasting en 10 miljard transistors
- Van 8K tot AI, dit is wat er in 2019 naar camera's zou kunnen komen
