Valódi fotós VR Avatarok mindent megkérdőjeleznek

Robbie Coopernek, a Metapixel társalapítójának van egy elképzelése. „Teljesen animált, hihető karaktereket szeretnék egy VR-játékban vagy környezetben, akik teljesen természetes módon reagálnak. Azt az érzést, hogy meg akarom érni és megérinteni őket, mert annyira valódiak. Ilyennek kell lennie egy VR-világnak.”

Nem csak álmodik róla: Ő és a Metapixel csapata ténylegesen azon dolgozik, hogy ezt lehetővé tegye. Egy hihetetlen kameraberendezés és néhány egyedi szoftver segítségével a Metapixel elképesztően élethű avatarokat hoz létre fotórealisztikus funkciók, amelyek egy tényleges személy nagy felbontású képén alapulnak, készen állnak a játékokban, filmekben és túl. Meglátogattuk a Metapixel Brightonban (Egyesült Királyság) található irodáját, hogy megnézzük a technológiát működés közben, és elkészítettük a saját avatárunkat.

Valódi fotós avatar

A kameraberendezés úgy néz ki, mint egy másik dimenzióba vezető portál; a redőny egyetlen kattintása elegendő ahhoz, hogy galaxisokon vagy időn át ugorjon. 102 van

Nikon D810 fényképezőgépek felszerelve, mindegyik három különböző objektív egyikével van felszerelve – egy 50 mm-es, egy 85 mm-es vagy egy 72-300 mm-es zoommal.

Természetesen nincs szó galaxiszappingról, de a zár kioldása után minden kamera 36 megapixeles RAW formátumú képet készít a témáról szinte minden elképzelhető szögből. Ezek a felvételek ezután átkerülnek a Metapixel számítógépes rendszerébe, ahol pillanatok alatt feldolgozzák őket. A következő körülbelül egy óra leforgása alatt a szoftver egy csodálatos fotó-valódi avatart hoz létre a képernyőn, amely pontosan úgy néz ki, mint a téma. Valójában ez egy ún fotogrammetria, ahol a különböző nézőpontokból készült fényképeket összefűzik, hogy egyetlen, 360 fokos renderet képezzenek, amely hasonló a 3D testszkenneléshez.

És amikor azt mondom, hogy pontosan úgy, mint a téma, komolyan is gondolom. Az eredmény elképesztő. Hogy kipróbáljam, felkértek, hogy álljak a szerelék közepére, és örökre megörökítsék a képemet. Valószínűleg ez az első és egyetlen alkalom, hogy egyszerre 102 kamera irányul felém. Azt mondta, hogy bámuljak egyetlen pontot, és maradjak teljesen mozdulatlanul, kissé kinyújtott karral kényelmetlen módon megvártam, amíg a fényképezőgépek feltöltődtek – aztán vakuvá vált a fotóm elvitték.

Minden egyes képet gondosan ellenőriznek, hogy vannak-e hibák, furcsa megvilágítás és árnyékok (amelyek megzavarhatják a számítógépet és tönkretehetik a végeredményt), valamint minden olyan hiányzó képet, amelynél a kamera valamilyen okból meghibásodott. Ezután a Metapixel saját szoftvere, a Capturing Reality elvégzi az összes nehéz feladatot. Összegyűjti az egyes fotókat, és egy hálóra térképezi fel a képet, így felépíti a végső avatart. 10-15 percbe telt az első szakasz felépítése, majd további 20 percbe telt a textúra és a szín hozzáadása.

A végén az itt látható képhez jutsz, egy olyan valóságos avatarhoz, hogy ijesztő. Ez is csak „normál” minőségnek számít. Vannak más szakaszok is, amelyek még tovább növelik a részletességet. Az egész folyamat kevesebb mint egy órát vett igénybe, beleértve a kamera beállítását és a feldolgozást.

A lehetőségeket

Mit lehet tenni a tökéletes avataroddal? Izgalmas lehetőségek tömegei vannak, de Cooper számára minden a virtuális valóságról szól. „Kövesse ezt igazán jó mesterséges intelligenciával, és a világ valósággá válik” – mondta. Például ahogy javul a mesterséges intelligencia, azt mondta nekem, hogy az avatarok megérthetik, hol „nézel” egy VR-játékban, és ennek megfelelően reagálnak. Minél valósághűbben néz ki és működik az avatar, annál jobban foglalkozik azzal, ami történik.

Munkájára mutatott rá animációs stúdió 3Lateral, ahol az arckövető technológiát alkalmazva a fotó-valódi avatárok egy színész arckifejezését és reakcióit tükrözik, bizonyítva, hogy amin már dolgoznak. Szemtől szembe találkozni azzal, ami már majdnem élő, lélegző ember egy VR-játékban vagy környezetben megváltoztathatja a játékon belüli karakterekkel való interakciót és együttérzésünket.

A filmekben is van izgalmas lehetőség. Egy színész, akit így pásztáznak, lényegében halhatatlanná válik. Képzelje el, hogy a színészek haláluk után is dolgoznak, vagy egy évekkel ezelőtti szkennelést indítanak el, hogy eljátsszanak egy jelenetet amitől a színésztől fiatalabbnak kell kinéznie – mindez digitálisan reprodukált, azonos megjelenésű avatar. Egy lépéssel túlmutat a 3D-s animáción, és felhasználhatja a mozgásrögzítésnél látott technikákat.

Ha kombinálja a szkennelést egy 3D-s nyomtatóval, akkor hirtelen teljesen tökéletes kinézetű akciófigurákat is kap. Vigye be a technológiát a múzeumokba és az oktatási környezetekbe, és visszatérhet Cooper víziójához azokról a karakterekről, akikben hisz. Lehet, hogy egyszer látni és hallani egy történelmi személy történetét meséli el életéről, és egy teljesen emberinek tűnő arcon valódi érzelmek jelennek meg. Izgalmas dolog, és a lehetőségek folyamatosan felmerülnek, minél többet gondolsz rá.

Majdnem valóság

Még mindig távol vagyunk attól, hogy mindezt a valóságban lássuk. A metapixel nagyon gyorsan hosszú utat tett meg; a cég csak 2015 végén építette meg első kameraberendezését, akkoriban 30 kamerával. Miközben bővült, az egyedi szoftveren még dolgoznak, és hamarosan frissítések is várják a fotózási folyamat hatékonyabbá tételét. Emellett maga a VR – a Metapixel kulcsfontosságú vezetési technológiája – még gyerekcipőben jár.

A Metapixel rengeteg figyelmet kelt egy ilyen fiatal cégnél, és egy filmgyártással dolgozik cég, VR-fejlesztők és még konferencia-szervezők is, hogy személyes, teljes testre kiterjedő szkennelést biztosítsanak USB-meghajtón mindenkinek résztvevők. Képzeld el, hogy a jövőben lehetőséged lesz használni ezt az avatart egy virtuális valóságban megrendezett konferencián. Az eredmények lenyűgözőek és izgalmasak a valóban korai technológiai szakaszban. Alig várjuk, hogy lássuk a fejlődést.

Szerkesztői ajánlások

• Ez a 8K monitor 3D technológiával rendelkezik, amely minden szögből megtekinthető
• A VZR új Model One fejhallgatója audiofil minőségű 3D hangzást biztosít a játékosoknak
• Az emblémák kiterjesztett valóság művészetté válnak a Snapchat új 3D Paint eszközével
• Nem engedheti meg magának ezt a 150 dolláros állványfejet? Csak 3D nyomtatás az Edelkrone Ortak FlexTilt
• Az Ikea 3D-nyomtatott kisegítő lehetőségeket kínál a játékosok számára