Facebook vänder sig till AI för att aktivera 3D-foton utan dubbelkamera

Facebook vände sig till artificiell intelligens så att dess 3D-fotofunktion inte längre kommer att kräva användning av porträttläge på smartphones med dubbla kameror.

Facebooks 3D-bilder, först avslöjat vid 2018 F8-utvecklarkonferensen och rullades ut några månader senare, använder kapaciteten hos dubbla kameror för att skapa bilder med djup och rörelse när den smartphone är lutad. Även om vilken mobil enhet som helst kan se 3D-foton, kunde effekten bara skapas av telefoner med porträttläge.

Rekommenderade videor

I en blogginlägg, Facebook sa att smartphones med en kamera nu kommer att kunna göra 3D-foton genom A.I. som producerar 3D-bilder från vanliga 2D-bilder. Systemet kan härleda 3D-strukturen för vilken bild som helst, oavsett om den bara togs med smarttelefonens kamera eller om den togs för flera år sedan. Detta möjliggör också 3D-selfies, gjorda med bilder tagna med enstaka framvända kameror.

Facebook tränade ett neuralt nätverk som kan uppskatta avståndet från kameran för varje pixel, vilket eliminerar behovet av den andra kameran. A.I. behövs för att övervinna tekniska utmaningar som inkluderar att korrekt sluta sig till positionen för en mängd olika ämne materia, samt att optimera systemet så att mobila enheter kommer att kunna slutföra processen på bara en bråkdel av en andra.

För att övervinna utmaningarna sa Facebook att de tränade det neurala nätverket på miljontals offentliga 3D-bilder och deras motsvarande djupkartor samtidigt som de använder olika mobiloptimeringstekniker som tidigare har utvecklats förbi Facebook A.I.

Nästa steg i tillämpningen av tekniken är på videor, men det innebär utmaningen med konsekventa bilddjup för en sömlös övergång till 3D-effekter. Men när Facebook väl tar reda på detta kommer det att möjliggöra en helt ny typ av innehåll som skapare kan dela på det sociala nätverket.

Facebooks framsteg inom 3D-foton liknar ansträngningarna från LucidPix, en A.I. app retad under CES 2020 som konverterar 2D-bilder till 3D-bilder. Under showcasen i januari var LucidPix i beta med mer än 250 000 testare och tänkte lansera under andra kvartalet i år för iOS och Android.

Redaktörens rekommendationer

  • 3D-printad cheesecake? Inuti den kulinariska strävan att göra en Star Trek matreplikator
  • Ny 3D-smarttelefonteknik kan förändra fotograferingen, säger experter
  • AMD retar prestandan hos sitt revolutionerande 3D V-cache-chip
  • NASA testar en 3D-skrivare som använder måndamm för att skriva ut i rymden
  • Hur man inaktiverar 3D och Haptic Touch i iOS

Uppgradera din livsstilDigitala trender hjälper läsare att hålla koll på den snabba teknikvärlden med alla de senaste nyheterna, roliga produktrecensioner, insiktsfulla redaktioner och unika smygtittar.