Magisk AR-demo gør 2D-billeder til 3D-animationer i 'Harry Potter'-stil

Photo Wake-Up: 3D Character Animation fra et enkelt billede

Forestil dig, hvis du var i stand til at pege din smartphone, tablet eller augmented reality (AR) headset mod et stillbillede, og se det komme til live lige foran dine øjne. Dette er noget, der er muligt ved hjælp af den nyeste augmented reality-teknologi, som f.eks Apples ARKit eller Googles ARCore. Men selvom vi har set det gjort før, har det typisk været begrænset til kun et eller to udvalgte billeder - for eksempel som et værktøj til at animere reklameskilte.

Anbefalede videoer

Forskere fra University of Washington og Facebook har bygget noget, der er meget mere alsidigt. Deres nyt "Photo Wake-Up"-projekt vil animere stationære karakterer i nogen billede, hvilket resulterer i, at de springer i gang for at sprinte mod dig ud af baggrunden. For hvem har tid til kedelige gamle stillbilleder, når vi når de sidste dage af 2018?

Forskerne skriver, at: "Nøglebidragene fra dette papir er [for det første] en anvendelse af at se og animere mennesker i enkelte fotos i 3D. [For det andet] en ny 2D-vridningsmetode til at deformere en justerbar skabelon kropsmodel, så den passer til personens komplekse silhuet for at skabe et animerbart mesh. Og [for det tredje] en metode til håndtering af delvise selvokklusioner. Vi sammenligner med state-of-the-art relaterede metoder og evaluerer resultater med menneskelige undersøgelser. Derudover præsenterer vi en interaktiv grænseflade, der gør det muligt at genplacere personen i 3D, og ​​et augmented reality-setup, hvor den animerede 3D-person kan dukke op fra billedet til den virkelige verden."

Relaterede

  • Microsoft og Samsung kunne slå sig sammen om et nyt AR-headset
  • Amazons nye AR-app lader dig have det sjovt med alle disse Prime Day-bokse
  • Vil du se Snoop Dogg i AR? Du bliver nødt til at købe en flaske af hans nye vin

Som det ses i videoen øverst, blev denne effekt demonstreret med succes på fotografier, i plakater og i kunstværker. På nuværende tidspunkt er forskningen stadig på et relativt tidligt stadie, selvom den viser sig at være imponerende dygtig til at genkende menneskelige figurer på tværs af række medier, uanset om de er modernistiske malede figurer i et Picasso-maleri eller dem, der er taget fra et sort/hvidt fotografi.

I deres papir foreslår forskerne, at dette arbejde kunne åbne op for nye måder at "nyde og interagere" med billeder. Hvis lignende interaktioner kunne udvides til at f.eks. få fotografiske biler til at køre, skyer til at bevæge sig og en hvilken som helst række andre muligheder, kunne dette vise sig at være starten på noget meget spændende. Som det er, kunne vi helt sikkert se, at det sparer animatorer betydelig tid.

Avisen, med titlen "Photo Wake-Up: 3D Character Animation from a Single Photo," er tilgængelig til at læse online.

Redaktørens anbefalinger

  • Apples nye AR-headset bruger muligvis Face ID-teknologi til at spore håndbevægelser
  • Ny software vil forvandle 2D-fotos til 3D-holografiske billeder til visning
  • Amazons nye AR-værktøj lader dig fylde et rum med flere virtuelle genstande
  • Doodles bliver til augmented reality-kunst med Snapchats nye 3D Paint-værktøj
  • Intern iOS 13-kode spilder bønner om nye Apple AR-headset

Opgrader din livsstilDigital Trends hjælper læserne med at holde styr på den hurtige teknologiske verden med alle de seneste nyheder, sjove produktanmeldelser, indsigtsfulde redaktionelle artikler og enestående smugkig.