Facebook kan bokstavelig talt åpne øynene med A.I. For å fikse lukkede øyne-bilder

Tidligere programmer bruker et bilde av andres øyne for å fikse et blink (tredje kolonne), men Facebook-forskere har nettopp laget et program som bruker dine egne øyne (fjerde kolonne).Facebook-forskning

Kunstig intelligens er nå smart nok til å male i de manglende områdene av et ansikt for å fikse et blink eller snu en rynke til et smil. Problemet? Disse A.I. programmer bruker en fremmeds fotografi, så selv om programmene kan fikse et dårlig blink, lager de også en Frankenstein av deg med andres øyne. Facebook-forskere kan imidlertid ha kommet opp med en løsning ved å trene en A.I. som bruker dine faktiske øyne fra et tidligere fotografi for å fikse det blinket. Facebook publiserte forskningen 18. juni.

Reparerer et fotografi med A.I. er ikke noe nytt - tidligere i år, Nvidia-forskere opprettet en A.I. helbredende verktøy som kan erstatte manglende piksler i et portrett, inkludert manglende øyne. Mens disse programmene kan fikse noe som et blink, A.I. stolt på en database med bilder av andre mennesker, som malte i andres øyne for å fikse det blinket. Foruten å bruke andres øyne, hadde teknologien også en tendens til å være partisk mot visse former og farger,

Facebook foreslår.

Anbefalte videoer

Men Facebook har sannsynligvis allerede en oversikt over ansiktet ditt (eller noen hundre selfies), så selskapets forskere bestemte seg for å prøve å fikse det vanskelige blinket uten å få det til å se ut som om du fikk et nytt par øyne. Forskerne skapte to forskjellige tilnærminger til teknikken, kalt eye in-painting. Den første bruker et referansebilde for å erstatte øynene. Den andre lagrer en faktisk versjon av øynene dine, lik hvordan Facebook lagrer data for ansiktsgjenkjenning, for bruk i disse rettelsene.

Mens mange A.I. programmer fungerer med eksisterende databaser med bilder for å trene programmet, Facebook opprettet sitt eget datasett. Settet med kjendisbilder tatt på en rullebane av profesjonelle fotografer stemte ikke overens med de dårlig opplyste selfies programmet er mer sannsynlig å møte, mens andre datasett inneholdt bilder med personer som hadde på seg solbriller. I stedet, Facebook laget et datasett på rundt 200 000 personer, med minst tre bilder av hver person.

Programmet baserer resultatene på referanseøyet for å bidra til å bevare identiteten, mens A.I. bidrar til å skape et mer realistisk resultat. Nettverket brukte for eksempel databildene til å lære å lage et realistisk resultat når posituren eller belysningen i referanseøynene og de redigerte bildene er annerledes.

Det resulterende programmet, sier Facebook, fikser øyeblink med resultater som ser mer nøyaktig ut som den spesifikke personen og uten å miste så mye data som tidligere programmer. Resultatene er ikke perfekte - for personer med hår som skjuler en del av det ene øyet, for eksempel programmet gjenskapte ikke øyets form nøyaktig, mens i andre scenarier var øyenfargen svak variasjoner.

Facebook er ikke ferdig med å undersøke muligheten for automatisk å fikse de blinkende selfiene, men med noen tilleggsarbeid kunne en fremtidig versjon av det sosiale nettverket gjøre mye mer med automatiske bildefikser før deling.

Redaktørenes anbefalinger

  • Nvidias siste A.I. resultater viser at ARM er klar for datasenteret
  • Kan A.I. slå menneskelige ingeniører med å designe mikrobrikker? Google mener det
  • Hvordan USPS bruker Nvidia GPUer og A.I. for å spore manglende e-post
  • The BigSleep A.I. er som Google Bildesøk etter bilder som ikke eksisterer ennå
  • Smart ny A.I. systemet lover å trene hunden din mens du er borte fra hjemmet

Oppgrader livsstilen dinDigitale trender hjelper leserne å følge med på den fartsfylte teknologiverdenen med alle de siste nyhetene, morsomme produktanmeldelser, innsiktsfulle redaksjoner og unike sniktitter.