Probudite se: Volumetrijski hologrami iz Epizode One novi su prizor za vidjeti

Pročitaj bilo koji opsežna pokrivenost virtualne stvarnosti i nesumnjivo ćete barem jednom ili dvaput naići na riječ "uronjenje". To je relativno nejasan izraz za osjećaj prisutnosti u virtualnom svijetu, ali je najbliži što možemo pružanju jedinstvene referentne točke za mjerenje uspjeha VR programera u izradi uvjerljivog iskustvo.

Većina programera koristi sličnu tehniku ​​za postizanje uranjanja. Oni rade unutar granica postojećih slušalica za virtualnu stvarnost i stvaraju male scene visoke vjernosti s binauralnim zvukom. Ako dovoljno dobro obave posao, možda ćete zalutati u tajnovita dolina. Rijetko se može popeti uzvisinu s druge strane - ali to je upravo ono Osvijestiti iz produkcijske kuće virtualne stvarnosti Pokreni VR pokušava učiniti.

Njegova otprilike 20-minutna prva epizoda lagano je interaktivno kinematografsko VR iskustvo koje donosi zadivljujuću priču o temi lucidnog sanjanja. No koliko god pripovijest bila intrigantna, tehnika volumetrijskog snimanja korištena za njezino stvaranje je 

Osvijestitinajupečatljiviji element.

Krajnji rezultat su likovi s nevjerojatno realističnim izrazima lica, pokretima i gestama. Ovo nije snimanje pokreta ping-pong loptice. To je nešto sasvim drugo.

**Blagi spojleri za Probudite se priča može biti prisutna u sljedećem intervjuu.**

Zbogom ping pong loptice, zdravo hologrami

“Tehnika koja Osvijestiti je posebno napisano oko volumetrijskog videa,” objasnio je kreator i redatelj Martin Taylor. "Dakle, to je nova vrsta snimanja izvedbe koja uzima cijelu glumčevu izvedbu, uključujući svu garderobu i puni izraz, te ih snima kao filmski hologram."

Ovo se jako razlikuje od tehnika snimanja pokreta koje se koriste za izradu većine likova u igricama za iskustva virtualne stvarnosti i tradicionalnije 2D igre. Dok oni koriste uzorke pokreta za izradu 3D modela koji se skinu kako bi oživjeli virtualne likove, volumetrijsko snimanje bilježi cijelu osobu. Iznutra i izvana, da tako kažem.

"Koristi posebnu opremu sa 106 kamera sa senzorima dubine koji su svi usmjereni prema cilindričnom volumenu u centar i do dva glumca mogu stajati u tom volumenu i izvoditi svoje izvedbe”, rekao je Taylor za Digital Trendovi. "Sve ove kamere i senzori to hvataju, a puno obrade i softvera to spaja u potpuno uvjerljivu i čvrstu digitalnu kopiju izvedbe."

To razvojnim programerima daje ne samo točan 3D prikaz gdje su ti glumci i kako su postavljeni u određenom trenutku, već i gotovo foto-realističan video dojam o njima.

"Sirova verzija snimaka je ogromna serija OBJ modela koji su jedinstveno različiti jedni od drugih, a zatim video tekstura koja je omotana preko vrha", rekao je Taylor.

Rani pioniri u njegovoj upotrebi, volumetrijsko snimanje nije bilo nešto što Start VR može izvesti sam. Trebala je Microsoftova pomoć.

Pravi plesni partner

U jednom od poletnijih segmenata iz Budan: Epizoda jedan, naš protagonist, Harry, dijeli ples sa svojim partnerom sa slikom koja se raspršuje po zidu u igri kao da je s nekog nevidljivog projektora. Baš kao što su se ti likovi našli unutar svemira igre, Start VR je zahtijevao određenog partnera koji će pomoći u stvaranju volumetrijskih izvedbi koje čine središnji dio Probudite se iskustvo.

“Napravili smo neke vrlo grube rane testove s ovom tehnologijom s Microsoft Kinect i a Canon 7D fotoaparat udružili zajedno i rezultati su bili komično grubi,” objasnio je Taylor. “Ali bilo je nešto u iskustvu boravka unutar VR-a i znajući da gledate stvarnost osoba […] Trebalo vam je toliko bliže da prijeđete čudesnu dolinu kako biste bili vrlo povezani iskustvo. Bio je to stvarno uzbudljiv trenutak i vrlo rano u našem poslu.”

U početku je Start VR razmišljao o razvoju vlastite opreme za volumetrijsko snimanje, ali složenost upravljanja takvim objektom, kao i početni trošak uključen u nabavu i konfiguraciju toliko kamera i senzora dubine bio je prevelik za smatrati.

Tim je proveo nekoliko godina tražeći lokalne dobavljače i studije s vlastitim postavkama volumetrijskog snimanja. Nitko od njih nije mogao učiniti ono što je Start VR želio, a to je ne samo snimati izvedbe, već ih moći ponovno osvijetliti nakon snimanja. Jedan od najunikatnijih aspekata Osvijestiti je da igrač, iako je ograničen u interaktivnim mogućnostima, može ispustiti male komadiće svjetla iz svojih virtualnih ruku, što može prosvijetliti zasjenjena područja iskustva.

Jedina tvrtka koja je to omogućila, kao i isporučila sustav za snimanje pokreta koji je potreban Start VR, bio je Microsoft.

“Tek smo se pojavili na njihov studio da smo shvatili što je potrebno da bi ovo uspjelo,” nastavio je Taylor. “Količina računala, sirova procesorska snaga, hardver i infrastruktura naveli su nas na razmišljanje. Odmah sam pomislio da ne postoji način na koji bismo mogli ovo izvesti bez ove razine gunđanja.”

Od zvijezda do ekrana

Nakon što su izvedbe glumaca snimljene, njihovo dovođenje u okruženje igre nije bilo jednostavno. Start VR otvorio je put kako u softveru, tako i u hardveru.

"Drugi veliki izazov bilo je [stvaranje] iskustva u Unreal engineu", objasnio je Taylor. “Dodatak nije postojao da bi prihvatio dinamičko osvjetljenje. Morali smo napraviti osnovne funkcije kao što su stvaranje ulazne i izlazne točke. Ako su dva lika snimljena u istom volumenu, morali smo ih razdvojiti i staviti na različite strane sobe.”

Nakon što je to riješeno i iskustvo se počelo skupljati, sljedeći veliki problem bila je optimizacija. Start VR blisko je surađivao s Nvidijom kako bi iskustvo glatko radilo na GTX 1080 Ti grafička kartica a zatim se počeo spuštati kako bi vidio kakve rezove je moguće napraviti kako bi se iskustvo pokrenulo na slabijem hardveru.

Osvijestiti trenutno nudi dva načina igranja. Opcija visoke vjernosti daleko je ugodnije iskustvo, iako Start VR to sugerira GTX 1080 kao minimalno potrebna specifikacija. Uspjeli smo ga natjerati da radi na AMD Radeon Fury X, ali broj sličica u sekundi je povremeno zastao. Standardna opcija mnogo je popustljivija, ali vizualni elementi imaju značajan udarac.

No to možda nije uvijek slučaj s ovom vrstom tehnologije. Izvršni direktor Start VR-a, Kain Tietzel, rekao je za Digital Trends kako vjeruje da bi Nvidia mogla iskoristiti prilagođeni hardver (možda sličan Tensor i RT jezgrama koje se nalaze u svoje RTX grafičke kartice) kako bi ponudio poboljšane performanse za volumetrijsko snimanje videa.

"Nitko nije napisao ništa specifično za ovu vrstu renderiranja", rekao je. “Kako se potražnja povećava i proizvodnja postaje sve uobičajenije mjesto, pretpostavljam da ćemo započeti vidjevši da Nvidia ima namjensko hardversko ubrzanje kako bi performanse bile veće i više realno.”

Veličina instalacije također je bila glavna briga za Start VR.

"Sirovo snimanje je 10 GB po sekundi neobrađenog volumetrijskog snimanja, tako da je potrebno puno posla da se ugura 15 minuta u 10 GB [preuzimanje]", rekao je Taylor. “Koristi najnoviji i najbolji od svih dodataka unutar Unreal Enginea. Definitivno tjeramo motor da radi stvari koje izvorno ne radi. Radimo na tome svakodnevno.”

Start VR mogao bi se odlučiti za modele još veće vjernosti od onih koje sada koristi. Ranije implementacije volumetrijskog snimanja poput Tvornica 42"Drži svijet“ obrazovno iskustvo koje vodi David Attenborough, izgleda bolje od Osvijestiti u nekim smislovima. To je zato što pružaju iskustvo virtualne stvarnosti od samo tri stupnja kretanja. Također svu pažnju usmjeravaju na lice i gornji dio tijela.

“Mogli biste dodati broj poligona koji dopuštamo [unutar Osvijestiti] samo u lice i tada postaje super visoka rezolucija,” objasnio je Taylor. “Postoje neki kompromisi koje tu biramo. Odlučili smo se za snimanje cijelog tijela jer želimo da ljudi mogu vidjeti svaki dio lika, hodati oko njega. Vidio sam ljude kako se valjaju po podu da vide jesu li likovi uporni.”

Igranje s hologramima

Nakon svih napora i posebnog razmatranja potrebnih za izradu Probudite se volumetrijsko iskustvo, krajnji rezultat je nešto sasvim drugačije od onoga na što je većina igrača navikla. "Tekstura" likova varira od iznimno detaljnih na licima, do grubih i zamućenih na teže dostupnim mjestima. Mješavina iznimno realističnih pokreta i pomalo kockastih modela podsjetila nas je na Rockstarovo izdanje iz 2011. LA Noire svojim jedinstvenim vizualnim stilom. Ili kao da je netko omotao UHD video preko školjke originalnog Xbox lika.

Daleko je od savršenog, s tehnologijom koja se posebno muči s razmacima između prstiju i dlačica, te pomalo kockastim obrisima likova. Ali zadivljujuće je na način koji se rijetko može naći u virtualnom ili bilo kojem drugom iskustvu simulirane stvarnosti, i ima ogroman potencijal za drugačiju vrstu interaktivnog iskustva.

Dok su snimke zaslona Osvijestiti možda imaju neobičnu vibru doline, kada ste zapravo unutra Probudite se svijetu, postoji nešto u volumetrijskom hvatanju što u potpunosti sprječava tu depresiju. Glumci ne izgledaju savršeno, ali izgledaju stvarno, a to je nešto što se ne može reći ni za najbolje snimljene CGI modele.

To uranjanje u virtualni svijet također je na neki način poboljšano tako što vas tjera da se odmaknete korak od njega. Ti nisi sudionik u ovom svijetu. Vi ste voajer. Za Start VR, to je cijelo vrijeme bio plan.

"[Drugi filmaši] uvijek se osjećaju prisiljeni da izvođači u sceni gledaju u vas, u kameru, i ne znam funkcionira li to nužno cijelo vrijeme", rekao je Tietzel za Digital Trends. "Ako se s tobom stalno ponašaju kao da te moraju gledati, mislim da to mijenja prirodu izvedbe i ja mislim da je rijetkost da zapravo vidite uvjerljive izvedbe pred kamerom i na koje trebate reagirati ih."

https://www.facebook.com/startvr/photos/a.558965407540304/1534047166698785/

To ne znači da se nikada ne osjećate uključeni u scenu Osvijestiti. Postoje trenuci, posebno oni izmišljeni, u kojima završite u vidokrugu lika, izazivajući u vama trzaje čuđenja mogu li vas vidjeti ili ne. Ne izvlači vas iz iskustva, ali vas podsjeća na vašu voajersku rolu u sceni. Ako ništa drugo, naglašava koliko je priča osobna, unatoč nagovještajima opširnijeg narativa izvan ove prve epizode.

(Lucidno) sanjanje budućnosti

Start VR ima planiranih osam epizoda Osvijestiti serije već, a Taylor je već proveo godine stvarajući priču koja je i osobna i opsežna. Kako se te epizode pojavljuju, možemo očekivati ​​mnoga poboljšanja, rečeno nam je.

"Tehnologija, točnost, broj sličica dramatično će se promijeniti", rekao je Tietzel za Digital Trends. “Čak i razumijevanje načina na koji osvjetljavamo i usmjeravamo predstave – koji je najbolji način da izvučemo predstave od glumaca u tom prostoru također će se promijeniti. Ovo je iskustvo učenja.”

Uz proširenje vlastite stručnosti s režiranjem glumaca i razvojem VR igara, Start VR također radi s Microsoftom kako bi nastavio poboljšavati tehniku ​​volumetrijskog snimanja kako bi virtualnom donio nove bore platno.

"To što vas lik primijeti jedan je od načina da ispričate priču i već mislim da se pojavljuju varijacije kojima možemo dodati liniju očiju", istaknuo je Taylor. “Surađujemo s Microsoftom na kontroli pokreta glave lika kako bi se mogao okrenuti i uhvatiti za vas do oko 30 stupnjeva s obje strane snimljenog položaja […] Također tjera ljude da rade reaktivne stvari. Dakle, postoje trenuci u kojima lik pruža ruku da vam nešto da. Osjećate li se prisiljenim pokušati im to skinuti? Pokušavamo te različite načine povezivanja s likom, a ne samo gledanje u njih.”

Start VR također planira eksperimentirati s više okruženja (Budan: Epizoda jedan odvija se gotovo isključivo u jednom. Možda jedan i pol), ali to je izvan dosega virtualne stvarnosti za koju Taylor i Tietzel smatraju da će se njihovi eksperimenti s volumetrijskim snimanjem najlakše osjetiti.

"Već istražujemo što bi moglo značiti uvođenje ove vrste snimanja u proširenu stvarnost, a izvedbe u stvarnom životu sljedeći su korak", rekao je Tietzel. "Rani testovi u ovom području dali su neke fascinantne rezultate."

Ova iskustva i prva epizoda Start VR-a Osvijestiti istaknuti uzbudljivi potencijal volumetrijskog snimanja. Oni zaobilaze greške u izvedbi tehnologija poput praćenja zraka za realistično osvjetljenje u igri i isporučite nešto što je uvjerljivo izbliza, čak i ako još uvijek ima nekoliko mrlja.

Budan: Epizoda jedan je uzbudljiv prvi korak u narativnom putovanju, ali je još veći skok za tehnološko poboljšanje koje mu je pomoglo da se rodi na svijetu. Uzbuđeni smo zbog čega Probudite se priča i tehnologije snimanja koje zagovara mogu se razviti i zamislite da ćemo ih oboje viđati mnogo više u budućnosti.

Budan: Epizoda jedan dostupan je na Steam i Viveport s cijenom od 8 dolara.

Preporuke urednika

• Dovođenje najbolje VR igre Star Wars na PlayStation VR2 nije bilo pametno, kažu programeri
• Impresivna laser tag igra miješane stvarnosti mogla bi biti novi as u VR-u
• Ako želite Quest 2, kupite ga prije nego što sljedeći tjedan dobije veliko povećanje cijene
• Što Golf? nastavak, Zona sumraka VR i više prikazano na UploadVR streamu
• Among Us VR, Ghostbusters i još mnogo toga dolazi u Meta Quest 2