Digital artist lager prisma-stil video med en algoritme

NYC FLOW

Forrige uke imponerte filmskapere Internett med sine håndbygget time-lapse-video som brukte Prisma for å få det til å se ut som en animasjon i stedet for en serie fotografier. Det viser seg at du ikke trenger å bruke timer på å jobbe med enkeltbilder, ett om gangen inne i Prisma for å oppnå denne effekten – selv om du trenger en kraftig datamaskin. Danil Krivoruchko, en digital artist, kjørte en iPhone-video gjennom en nevrale nettverksalgoritme som automatisk malte over hver ramme, og resultatet er rett og slett fantastisk.

Videoen, med tittelen NYC Flow, ble skutt med 240 bilder per sekund, noe som ga en sakte filmutgang som allerede ga den en drømmende følelse til å begynne med. Derfra kjørte Krivoruchko den gjennom algoritmen, som fullstendig forvandlet den til et levende maleri.

Selve algoritmen kommer fra Manuel Ruder og teamet hans, som publiserte det i en avis ved universitetet i Freiburg i Tyskland. Den er i stand til å kopiere en stil fra en inngangskilde, som et maleri, og bruke den på en video. Det er faktisk veldig lik teknologien som brukes av Prisma, bortsett fra at appen ikke håndterer video ennå.

Anbefalte videoer

Skulle du være interessert i å prøve ut denne teknikken, ta turen til Ruders GitHub hvor åpen kildekode kan lastes ned. Vær imidlertid oppmerksom, siden du trenger en kraftig datamaskin som kjører Ubuntu med en heftig grafikkort. Fire gigabyte med videominne kreves bare for å sende ut en video med en oppløsning på 450 x 350 piksler.

Hensikten med å bygge algoritmen var å lage automatisert rotoskoping for å erstatte de tidkrevende oppgavene med å la menneskelige kunstnere håndmale hver ramme for å gjøre den om til en animasjon. Rotoskopering er en gammel teknikk, med kanskje den mest bemerkelsesverdige bruken i filmen En skanner mørkt.

NYC Flow er en del av Krivoruchko Dyp langsom flyt prosjekt på Instagram, som utforsker ideen om å bruke nevrale nettverkskode i filmskaping.

Redaktørenes anbefalinger

  • Fremtidens hustakstmann er trolig en A.I. algoritme
  • En A.I. knekker internetts snirklete bokstav-bottest på 0,5 sekunder

Oppgrader livsstilen dinDigitale trender hjelper leserne å følge med på den fartsfylte teknologiverdenen med alle de siste nyhetene, morsomme produktanmeldelser, innsiktsfulle redaksjoner og unike sniktitter.