Facebook kan bokstavligen öppna ögonen med A.I. För att fixa foton med slutna ögon

click fraud protection
Tidigare program använder en bild av någon annans ögon för att fixa en blinkning (tredje kolumnen), men Facebook-forskare skapade precis ett program som använder dina egna ögon (fjärde kolumnen).Facebook-forskning

Artificiell intelligens är nu smart nog att måla i de saknade områdena i ett ansikte för att fixa en blinkning eller förvandla en rynka pannan till ett leende. Problemet? Dessa A.I. program använder en främlings fotografi, så även om programmen kan fixa en dålig blinkning, skapar de också en Frankenstein av dig med någon annans ögon. Facebook-forskare kan dock ha kommit på en lösning genom att utbilda en A.I. som använder dina faktiska ögon från ett tidigare fotografi för att fixa blinkningen. Facebook publicerade forskningen den 18 juni.

Reparera ett fotografi med A.I. är inget nytt - tidigare i år, Nvidia-forskare skapade en A.I. helande verktyg som kan ersätta saknade pixlar i ett porträtt, inklusive saknade ögon. Medan dessa program kan fixa något som en blinkning, kan A.I. förlitade sig på en databas med bilder av andra människor som målade i någon annans ögon för att fixa den blinkningen. Förutom att använda någon annans ögon, tenderade tekniken också att vara partisk mot vissa former och färger,

Facebook föreslår.

Rekommenderade videor

Men Facebook har förmodligen redan ett register över ditt ansikte (eller några hundra selfies), så företagets forskare bestämde sig för att försöka fixa den där besvärliga blinkningen utan att få det att se ut som om du fick ett nytt par ögon. Forskarna skapade två olika metoder för tekniken, kallad eye in-painting. Den första använder en referensbild för att ersätta ögonen. Den andra lagrar en verklig version av dina ögon, liknande hur Facebook lagrar data för ansiktsigenkänning, att använda i dessa korrigeringar.

Medan många A.I. program fungerar med befintliga databaser med foton för att träna programmet, Facebook skapade sin egen datamängd. Uppsättningen av kändisbilder som tagits på en bana av professionella fotografer matchade inte de dåligt upplysta selfies som programmet är mer benägna att stöta på, medan andra datauppsättningar innehöll bilder med personer som bär solglasögon. Istället, Facebook skapade en datauppsättning med cirka 200 000 personer, med minst tre bilder av varje person.

Programmet baserar resultaten på referensögat för att hjälpa till att bevara identiteten, medan A.I. hjälper till att skapa ett mer realistiskt resultat. Nätverket använde till exempel databilderna för att lära sig hur man skapar ett realistiskt resultat när poseringen eller belysningen i referensögonen och de redigerade bilderna är annorlunda.

Det resulterande programmet, säger Facebook, fixar ögonblinkningar med resultat som ser mer exakt ut som den specifika individen och utan att förlora lika mycket data som tidigare program. Resultaten är inte perfekta - för personer med hår som skymmer en del av ett öga, till exempel programmet återskapade inte ögats form exakt, medan i andra scenarier var ögonfärgen svag variationer.

Facebook är inte färdig med att undersöka möjligheten att automatiskt fixa dessa blinkande selfies, men med några ytterligare arbete kunde en framtida version av det sociala nätverket göra mycket mer med automatiska fotofixar tidigare delning.

Redaktörens rekommendationer

  • Nvidias senaste A.I. Resultaten visar att ARM är redo för datacentret
  • Kan A.I. slå mänskliga ingenjörer vid design av mikrochips? Google tycker det
  • Hur USPS använder Nvidia GPU: er och A.I. för att spåra saknad e-post
  • The BigSleep A.I. är som Google Bildsökning efter bilder som inte finns ännu
  • Smart ny A.I. systemet lovar att träna din hund när du är borta från hemmet

Uppgradera din livsstilDigitala trender hjälper läsare att hålla koll på den snabba teknikvärlden med alla de senaste nyheterna, roliga produktrecensioner, insiktsfulla redaktioner och unika smygtittar.