Digital kunstner laver video i Prisma-stil med en algoritme

NYC FLOW

I sidste uge imponerede filmskabere internettet med deres håndbygget time-lapse video, der brugte Prisma at få det til at ligne en animation frem for en serie fotografier. Det viser sig, at du ikke behøver at bruge timer på at arbejde med enkelte billeder, et ad gangen inde i Prisma for at opnå denne effekt - selvom du har brug for en kraftfuld computer. Danil Krivoruchko, en digital kunstner, kørte en iPhone-video gennem en neural netværksalgoritme, der automatisk malede over hvert billede, og resultatet er simpelthen fantastisk.

Videoen, med titlen NYC Flow, blev optaget med 240 billeder i sekundet, hvilket gav et slowmotion-output, der allerede gav det en drømmende fornemmelse til at begynde med. Derfra kørte Krivoruchko det gennem algoritmen, som fuldstændigt forvandlede det til et levende maleri.

Selve algoritmen kommer fra Manuel Ruder og hans team, som udgivet det i en avis ved universitetet i Freiburg i Tyskland. Det er i stand til at kopiere en stil fra en inputkilde, som et maleri, og anvende den på en video. Det er i virkeligheden meget lig teknologien, som Prisma anvender, bortset fra at appen endnu ikke håndterer video.

Anbefalede videoer

Skulle du være interesseret i at prøve denne teknik, så kom forbi til Ruders GitHub hvor open source-koden kan downloades. Pas dog på, da du skal bruge en kraftfuld computer, der kører Ubuntu med en heftig grafikkort. Fire gigabyte videohukommelse kræves bare for at udsende en video med en opløsning på 450 x 350 pixels.

Formålet med at opbygge algoritmen var at skabe automatiseret rotoscoping for at erstatte de tidskrævende opgaver med at få menneskelige kunstnere til at håndmale hver frame for at gøre den til en animation. Rotoskopering er en gammel teknik, med dens måske mest bemærkelsesværdige anvendelse i filmen A Scanner Darkly.

NYC Flow er en del af Krivoruchko's Dybt langsom flow projekt på Instagram, som udforsker ideen om at bruge neural netværkskode i filmproduktion.

Redaktørens anbefalinger

  • Fremtidens hustaksator er formentlig en A.I. algoritme
  • En A.I. knækker internettets snoede bogstav-bot-test på 0,5 sekunder

Opgrader din livsstilDigital Trends hjælper læserne med at holde styr på den hurtige teknologiske verden med alle de seneste nyheder, sjove produktanmeldelser, indsigtsfulde redaktionelle artikler og enestående smugkig.