Avatary Photo-Real VR vás prinútia spochybňovať všetko

Robbie Cooper, spoluzakladateľ Metapixel, má víziu. „Chcem plne animované, vierohodné postavy vo VR hre alebo prostredí, ktoré reagujú úplne prirodzeným spôsobom. Cítiť túžbu osloviť ich a dotknúť sa ich, pretože sú také skutočné. Tak by mal byť svet VR."

Nielen o tom sníva: On a tí Metapixel tím skutočne pracuje na tom, aby to bolo možné. Pomocou neuveriteľného kamerového zariadenia a nejakého softvéru na mieru vytvára Metapixel úžasne realistické avatary s fotorealistické funkcie, založené na obrázkoch skutočnej osoby vo vysokom rozlíšení, pripravené na použitie v hrách, filmoch a mimo. Navštívili sme kanceláriu Metapixel v Brightone v Spojenom kráľovstve, aby sme videli technológiu v akcii a nechali si vytvoriť vlastného avatara.

Foto-skutočný avatar

Kamerové zariadenie vyzerá ako portál do inej dimenzie; jediné kliknutie spúšte je všetko, čo bude potrebné na to, aby ste prešli galaxiami alebo časom. Je ich 102 Fotoaparáty Nikon D810 namontované na ňom, všetky vybavené jedným z troch rôznych objektívov – 50 mm, 85 mm alebo 72-300 mm zoom.

Samozrejme, nie je zahrnuté žiadne prepínanie galaxií, ale po uvoľnení uzávierky každý fotoaparát nasníma 36-megapixlový obrázok objektu vo formáte RAW z takmer každého mysliteľného uhla. Tieto zábery sa potom prenesú do počítačového systému Metapixel, kde sa spracujú v priebehu niekoľkých sekúnd. V priebehu približne nasledujúcej hodiny softvér vytvorí na obrazovke úžasný fotoreálny avatar, ktorý vyzerá presne ako objekt. Je to vlastne technika tzv fotogrametria, kde sú fotografie nasnímané z rôznych uhlov spojené do jedného 360-stupňového renderu podobného 3D skenovaniu tela.

A keď hovorím presne ako predmet, myslím to vážne. Výsledok je neskutočný. Aby som to otestoval, bol som pozvaný postaviť sa do stredu plošiny a nechať si navždy zvečniť svoj obraz. Je to pravdepodobne prvý a jediný prípad, kedy bude mojím smerom nasmerovaných 102 kamier súčasne. Povedal som, aby som sa díval na jeden bod a zostal úplne nehybný, s rukami mierne roztiahnutými nepohodlným spôsobom som čakal, kým boli fotoaparáty naštartované – potom ma oslepil blesk ako moja fotografia bolo zobrané.

Každý obrázok je starostlivo skontrolovaný, či neobsahuje chyby, nezvyčajné osvetlenie a tiene (ktoré môžu zmiasť počítač a zničiť konečný obrázok) a chýbajúce obrázky, pri ktorých fotoaparát z nejakého dôvodu zlyhal. Vlastný softvér Metapixel s názvom Capturing Reality potom robí všetko ťažké. Spája každú fotografiu a mapuje obrázok na sieť, čím vytvára konečného avatara. Vytvorenie prvej fázy trvalo 10 až 15 minút, potom ďalších 20 minút na pridanie textúry a farby.

Skončíte s obrázkom, ktorý vidíte tu, avatarom tak skutočným, že je to desivé. Tiež sa považuje len za „normálnu“ kvalitu. Existujú ďalšie stupne, ktoré úroveň detailov ešte zvyšujú. Celý proces vrátane všetkých nastavení fotoaparátu a spracovania trval menej ako hodinu.

Možnosti

Čo sa dá urobiť s vaším dokonalým avatarom? Existuje množstvo vzrušujúcich možností, ale pre Coopera je to všetko o virtuálnej realite. „Skombinujte to so skutočne dobrou umelou inteligenciou a svet sa stane skutočným,“ povedal. Napríklad, keď sa AI zlepšuje, povedal mi, avatari môžu pochopiť, kam sa „dívate“ v hre VR, a podľa toho reagovať. Čím realistickejšie avatar vyzerá a pôsobí, tým viac vás zaujíma, čo sa deje.

Poukázal na prácu o animačné štúdio 3 Lateral, kde pomocou technológie sledovania tváre zrkadlia fotoreálne avatary výrazy tváre a reakcie herca, ako dôkaz toho, na čom sa už pracuje. Stretnúť sa zoči-voči tomu, čo je takmer živý, dýchajúci človek v hre alebo prostredí VR má potenciál zmeniť spôsob, akým interagujeme a vcítime sa do postáv v hre.

Vo filmoch je tiež vzrušujúci potenciál. Takto naskenovaný herec sa stáva v podstate nesmrteľným. Predstavte si hercov, ktorí pokračujú v práci aj po smrti, alebo vyvolávajú sken spred rokov, aby v ňom zahrali scénu od herca sa vyžaduje, aby vyzeral mladšie – to všetko je možné s digitálne reprodukovaným, identicky vyzerajúcim avatar. Ide o krok nad rámec 3D animácie a môže využívať techniky, ktoré možno vidieť pri snímaní pohybu.

Skombinujte skenovanie s 3D tlačiarňou a zrazu máte úplne perfektne vyzerajúce akčné figúrky. Prineste technológiu do múzeí a učebných prostredí a vrátite sa k Cooperovej vízii postáv, ktorým veríte. Možno jedného dňa uvidíte a budete počuť, ako historická osoba rozpráva príbeh o svojom živote so skutočnými emóciami na tvári, ktorá vyzerá ako úplne ľudská. Je to vzrušujúca vec a možnosti sa objavujú, čím viac o tom premýšľate.

Takmer realita

Ešte chvíľu nás delí od toho, aby sme to všetko videli v skutočnosti. Metapixel prešiel dlhú cestu veľmi rýchlo; Spoločnosť postavila svoje prvé kamerové zariadenie s 30 kamerami v tom čase na konci roka 2015. Aj keď sa rozšíril, na vlastnom softvéri sa stále pracuje a čoskoro sa objavia inovácie, ktoré zefektívnia proces fotografovania. Okrem toho samotná VR – kľúčová hnacia technológia pre Metapixel – je stále v plienkach.

Metapixel priťahuje veľa pozornosti pre takú mladú spoločnosť a spolupracuje s filmovou produkciou spoločnosť, vývojári VR a dokonca aj organizátori konferencií, aby všetkým poskytli osobné skeny celého tela na USB kľúči účastníkov. Predstavte si, že v budúcnosti budete mať možnosť použiť tohto avatara na konferencii vo virtuálnej realite. Výsledky sú pôsobivé a vzrušujúce vzhľadom na to, čo je skutočne v počiatočnom štádiu technológie. Nevieme sa dočkať, ako sa to bude vyvíjať.

Odporúčania redaktorov

• Tento 8K monitor má 3D technológiu, ktorú je možné sledovať zo všetkých uhlov
• Nové slúchadlá Model One od VZR prinášajú hráčom 3D zvuk v audiofilskej kvalite
• Sviatočné logá sa stávajú umením rozšírenej reality s novým nástrojom Snapchat 3D Paint
• Nemôžete si dovoliť túto statívovú hlavu za 150 dolárov? Stačí 3D tlač Edelkrone Ortak FlexTilt
• Ikea vytvára sériu 3D tlačených doplnkov na zjednodušenie ovládania pre hráčov