Ctrl Shift Gezichtsinterview

In een parallel universum bestaat er een versie van Casino royaal waarbij Hugh Jackman ieders favoriete zachte Britse agent speelt, James Bond. En eentje waarin Matthew McConaughey de rol van Leo op zich nam Titanisch. En DiCaprio en Brad Pitt speelden samen in de hoofdrol Brokeback Mountain. En Gered door de belTiffani Thiessen speelde Rachel in Vrienden.

De entertainmentindustrie heeft niet bepaald een tekort aan ‘wat als?’ scenario's waarin acteurs dichtbij kwamen, maar uiteindelijk werden gepasseerd, terwijl ze iconische rollen speelden. Gedurende meer dan 99% van de filmgeschiedenis hebben fans weinig meer kunnen doen dan deze trivia wegwerken voor gebruik in popquizzen. Dat is tot de komst van deepfakes.

Deepfakes zijn de afgelopen jaren tot leven gekomen en maken gebruik van kunstmatige intelligentietechnologie om nieuwe afbeeldingen en video's te combineren en over bestaande bronbeelden heen te plaatsen met behulp van machinaal leren. Dat kan van alles betekenen, van gezichtswissels tot het in kaart brengen van het lichaam van één persoon

Eén technologieliefhebber en filmliefhebber denkt daar echter anders over. Opererend onder de YouTube-gebruikersnaam “Ctrl Shift-gezicht”, heeft deze hightech Hollywood-fan deepfake-technologie gebruikt om een ​​aantal verbazingwekkende remixen van iconische filmscènes te maken, compleet met geheel nieuwe acteurs. Ooit willen zien De glans met Jim Carrey in plaats van Jack Nicholson? Sly Stallone binnen Terminator 2: Dag des Oordeels? Heck, hij heeft zelfs gebroken met het filmthema door David Bowie in het beruchte lied van Rick Astley te laten vallen dat een meme is geworden Ik ga jou nooit op geven.

“Die van Bowie is mijn favoriet”, vertelde de maker ervan aan Digital Trends. “Ik wilde mensen Rickrollen en ze tegelijkertijd wegblazen. Bowie paste in de rol van Rick Astley en had interessante gelaatstrekken voor een deepfake.”

Dus wie is precies deze grappenmaker die enkele van de grootste acteurs ter wereld met een paar muisklikken in films kan stoppen waarin ze nooit zijn verschenen? Hij vertelt het niet. ‘Ik wil mijn echte naam eigenlijk niet delen’ Ctrl Shift Face's maker uitgelegd. “Het is niet belangrijk, denk ik. Ik laat mijn werk voor zichzelf spreken.” Wel vermeldde hij enkele persoonlijke gegevens, zoals zijn leeftijd (31), zijn geboorteplaats (Slowakije, hoewel hij daar niet meer woont), en het feit dat zijn werk voor sommigen computergraphics met zich meebrengt niveau.

Maar uiteindelijk roept het feit dat we niet weten wie er achter Ctrl Shift Face zit een belangrijk punt op over de wereld van deepfakes. Dit soort slimme CGI-tovenarij is niet langer beperkt tot een paar tophuizen met speciale effecten in Hollywood, maar is nu voor iedereen beschikbaar. Het is code die gratis online beschikbaar is en die elke acteur levend of dood in elke film kan plaatsen die je maar kunt bedenken. Geen salarisonderhandelingen van meerdere miljoenen dollars of een gesprek met een trailer met airconditioning nodig!

“Ik ben geen programmeur, maar een gebruiker”, zegt de maker van Ctrl Shift Face. “Ik ken de details niet over hoe de software precies werkt. De workflow werkt als volgt: u voegt bron- en doelvideo's toe, waarna één neuraal netwerk gezichten zal detecteren en extraheren. Er is enige gegevensopschoning en handmatige extractie nodig. Vervolgens analyseert en leert de software deze gezichten. Deze stap kan soms enkele dagen duren. Hoe meer het netwerk leert, hoe gedetailleerder het resultaat zal zijn. In de laatste stap combineer je deze twee en het resultaat is je deepfake. Soms is er ook wat nabewerking nodig.”

De toekomst van vervalsingen

Hoewel zijn favoriete video, zoals gezegd, die van Bowie is, is degene die volgens hem objectief gezien de beste is de Jim Carrey-versie van De glans. Het gezicht van de acteur erachter plaatsen Ace Ventura: huisdierendetective op het lichaam van Jack Nicholson zou niet moeten werken, maar dat werkt echt wel. "Ik had het idee om een ​​komische acteur in een serieuze donkere scène te plaatsen", zei hij. "Jim on Jack leek een goede match."

Wat betreft zijn minst favoriete? Terminator 2's face swap waarbij Stallone de rol op zich neemt die beroemd is gemaakt door Arnold Schwarzenegger. "Ik denk dat mijn video's mijn gevoel voor humor weerspiegelen", zei hij. "Voor T2, daar komt deze grap vandaan Laatste actieheld, waar het een soort alternatief universum is waarin Sly de Terminator speelde. Maar hij voelt de resultaten niet werkte volledig, vanwege zijn keuze om de audio te bewerken met een impressionist die een Stallone maakte nabootsing.

“Ik kon het niet naadloos monteren, dus de achtergrondmuziek en omgevingsgeluiden hebben een opvallende sprong”, merkte hij op. “Mijn versie van de film had slechts 2.1 audio. Later besefte ik dat als ik 5.1-audio had gebruikt, ik de audiokanalen kon scheiden en de nieuwe stem gemakkelijk kon bewerken. Een andere grote spijt was dat de Door en door slecht slotnummer had eigenlijk moeten zijn Oog van de tijger. Het zou een veel betere video zijn geweest dan nu.”

Hij zei dat hij iets van studio's heeft gehoord, maar "ik kan niet over details praten." Dat betekent dat we niet weten of de remixen hoog aangeschreven staan ​​of juist het tegenovergestelde. Gezien het enthousiasme van Hollywood over digitaal verouderende acteurs, of zelfs het reïncarneren van overledenen door hun hoofd op de lichamen van andere acteurs te leggen, lijkt het erop dat deze technologie steeds meer zijn weg zal vinden naar blockbusters met een groot budget. Maar het is minder duidelijk of Tinseltown blij is dat dergelijke tools voor iedereen beschikbaar zijn.

De zaken zouden ook nog overtuigender kunnen worden. Terwijl de poging om de audio van Arnie te vervangen aan staat Terminator 2 werkte niet zoals gepland, er zijn inspanningen gaande in onderzoekslaboratoria om dit te doen pionier in het audio-equivalent van deepfakes. Dat betekent dat het in de nabije toekomst haalbaar zal zijn om de toespraak van een acteur realistisch na te bootsen met behulp van vergelijkbare trainingsgegevens.

“Dat valt buiten mijn expertise”, zei de maker van Ctrl Shift Face. “Maar misschien ga ik in de toekomst samenwerken met mensen die dit soort AI-stemmen kunnen maken.”

Upgrade uw levensstijlMet Digital Trends kunnen lezers de snelle technische wereld in de gaten houden met het laatste nieuws, leuke productrecensies, inzichtelijke redactionele artikelen en unieke sneak peeks.