Přečtěte si jakýkoli rozsáhlé pokrytí virtuální reality a nepochybně se alespoň jednou nebo dvakrát setkáte se slovem „ponoření“. To je poměrně vágní termín pro pocit přítomnosti ve virtuálním světě, ale je tak blízko, jak jen poskytnout jedinečný referenční bod pro měření úspěchu vývojáře VR při vytváření uvěřitelného Zkušenosti.
Obsah
- Tak dlouhé pingpongové míčky, ahoj hologramy
- Správný taneční partner
- Od hvězd k obrazovkám
- Hraní si s hologramy
- (Lucidní) snění o budoucnosti
Většina vývojářů používá podobnou techniku k dosažení ponoření. Pracují v mezích stávajících náhlavních souprav pro virtuální realitu a vytvářejí malé, vysoce věrné scény s binaurálním zvukem. Pokud odvedou dostatečně dobrou práci, můžete zjistit, že putujete do tajemné údolí. Je vzácné vylézt na svah na druhé straně – přesto je to přesně to Probudit z produkčního domu virtuální reality Spusťte VR se pokouší udělat.
Doporučená videa
Jeho zhruba 20minutová první epizoda je lehce interaktivní filmový VR zážitek, který přináší strhující příběh na téma lucidního snění. Ale jakkoli je vyprávění zajímavé, je to technika volumetrického zachycení, která se používá k jeho vytvoření.
Probuditnejvýraznějším prvkem.Konečným výsledkem jsou postavy s neuvěřitelně realistickou mimikou, pohyby a gesty. Nejedná se o žádné zachycení pohybu pingpongovým míčkem. Je to něco úplně jiného.
**Mírné spoilery pro Probuďte se příběh může být přítomen v následujícím rozhovoru.**
Tak dlouhé pingpongové míčky, ahoj hologramy
„Ta technika Probudit bylo konkrétně napsáno kolem objemového videa,“ vysvětlil tvůrce a režisér Martin Taylor. "Je to nový typ zachycení představení, které zachycuje celý herecký výkon včetně veškerého šatníku a celého výrazu a zachycuje je jako filmový hologram."
Volumetrické snímání nebylo něco, co by Start VR mohl provádět sám. Potřebovalo to pomoc Microsoftu.
To se velmi liší od technik snímání pohybu používaných k vytváření většiny herních postav pro zážitky ve virtuální realitě i pro tradičnější 2D hry. Zatímco tito používají vzorky pohybů k vytvoření 3D modelů, které jsou staženy, aby oživily virtuální postavy, objemové snímání zaznamenává celou osobu. Zevnitř i zvenku, abych tak řekl.
„Využívá speciální zařízení se 106 kamerami s hloubkovými senzory, které všechny směřují k válcovému objemu v centrum a až dva herci mohou stát v tomto objemu a předvést své výkony,“ řekl Taylor Digital Trendy. "Všechny tyto kamery a senzory to zachycují a spousta zpracování a softwaru to spojuje do zcela věrohodné a solidní digitální kopie představení."
To vývojářům poskytuje nejen přesné 3D znázornění toho, kde se tito herci nacházejí a jak jsou v kteroukoli konkrétní dobu pózováni, ale také jejich téměř fotorealistický obraz z videa.
„Nezpracované verze zachycených snímků jsou obrovskou sérií modelů OBJ, které se všechny od sebe jedinečně liší, a pak video texturou, která je obalena přes vršek,“ řekl Taylor.
První průkopníci v jeho používání, volumetrické snímání nebylo něco, co by Start VR mohl provádět sám. Potřebovalo to pomoc Microsoftu.
Správný taneční partner
V jednom z více povznášejících segmentů od Awake: Episode One, náš hlavní hrdina, Harry, sdílí tanec se svým partnerem s obrazem rozstřikovaným po herní zdi jako z nějakého neviditelného projektoru. Stejně jako se tyto postavy navzájem našly v herním vesmíru, Start VR vyžadoval specifického partnera, který by pomohl vytvořit objemové výkony, které tvoří středobod hry. Probuďte se Zkušenosti.
"Udělali jsme několik velmi hrubých prvních testů s touto technologií s a Microsoft Kinect a a 7D fotoaparát Canon se spojily a výsledky byly komicky hrubé,“ vysvětlil Taylor. „Ale na zážitku být uvnitř VR a vědět, že se díváte na skutečné, bylo něco osoba […] Trvalo vám to trochu blíž k tomu, abyste se dostali přes tajemné údolí, abyste byli velmi propojeni Zkušenosti. Byl to opravdu vzrušující okamžik a velmi brzy v našem podnikání.“
Společnost Start VR se zpočátku zabývala vývojem vlastního volumetrického snímacího zařízení, ale složitost správy takového zařízení stejně jako počáteční náklady spojené s pořízením a konfigurací tolika kamer a hloubkových senzorů byly příliš vysoké. zvážit.
"Myslel jsem, že neexistuje způsob, jak bychom to mohli zvládnout bez takové úrovně chrochtání."
Tým strávil několik let hledáním místních dodavatelů a studií s vlastním nastavením objemového snímání. Žádný z nich nedokázal to, co Start VR chtěl, tedy nejen nahrávat vystoupení, ale mít možnost je po nahrávání znovu nasvítit. Jeden z nejunikátnějších aspektů Probudit spočívá v tom, že hráč, i když má omezené interaktivní možnosti, může ze svých virtuálních rukou uvolnit malé kousky světla, které mohou osvětlit stínované oblasti zážitku.
Jedinou společností, která by to umožnila a zároveň dodala potřebný systém pro snímání pohybu Start VR, byl Microsoft.
„Až když jsme se objevili jejich ateliéru že jsme si uvědomili, co je potřeba k tomu, aby to fungovalo,“ pokračoval Taylor. „Množství počítačů, surový výpočetní výkon, hardware a infrastruktura nás přiměly přemýšlet. Okamžitě jsem si myslel, že neexistuje způsob, jak bychom to mohli zvládnout bez takové úrovně chrochtání."
Od hvězd k obrazovkám
Jakmile byly herecké výkony zachyceny, nebylo snadné je přenést do herního prostředí. Start VR prorazil cestu v softwaru i hardwaru.
„Další velkou výzvou bylo [vybudování] zkušeností v Unreal enginu,“ vysvětlil Taylor. „Plugin neexistoval, aby přijímal dynamické osvětlení. Museli jsme udělat základní funkce, jako je vytvořit vstupní a výstupní bod. Pokud byly dvě postavy natočeny ve stejném svazku, museli jsme je rozdělit a umístit na různé strany místnosti.“
"Určitě tlačíme na motor, aby dělal věci, které přirozeně nedělá." Pracujeme na tom denně."
Jakmile se to vyřešilo a zkušenosti se začaly spojovat, dalším velkým problémem byla optimalizace. Start VR úzce spolupracoval se společností Nvidia, aby zážitek fungoval hladce na GTX 1080 Ti grafická karta a pak se začal propracovávat dolů, aby zjistil, jaké druhy škrtů by bylo možné provést, aby bylo možné provozovat zážitek na slabším hardwaru.
Probudit aktuálně nabízí dva herní režimy. Možnost vysoké věrnosti je mnohem příjemnější, ačkoli Start VR to naznačuje GTX 1080 jako minimální požadovaná specifikace. Podařilo se nám to zprovoznit na AMD Radeon Fury X, ale obnovovací frekvence občas zadrhávaly. Standardní varianta je mnohem shovívavější, ale vizuály jsou výrazně zasaženy.
To však nemusí být vždy případ tohoto druhu technologie. Generální ředitel společnosti Start VR Kain Tietzel pro Digital Trends řekl, že věří, že Nvidia může využít hardware na míru (možná podobný jádrům Tensor a RT, která se nacházejí v jeho grafické karty RTX) nabízí lepší výkon pro objemové snímání videa.
"Nikdo ve skutečnosti nenapsal nic konkrétního, co by zvládlo tento druh vykreslování," řekl. „Jak se poptávka zvyšuje a výroba se začíná stávat běžnějším místem, představuji si, že začneme vidět, že Nvidia má vyhrazenou hardwarovou akceleraci, aby byl výkon vyšší a lepší realistický."
Velikost instalace byla také hlavním problémem pro Start VR.
„Nezpracovaný záznam je 10 GB za sekundu surového volumetrického záznamu, takže je spousta práce, kterou je potřeba vtěsnat 15 minut do 10 GB [stažení],” řekl Taylor. „Používá nejnovější a nejlepší ze všech pluginů v Unreal Engine. Rozhodně tlačíme na motor, aby dělal věci, které přirozeně nedělá. Pracujeme na tom denně."
Nejste účastníkem tohoto světa. Jste voyeur. Pro Start VR to byl plán po celou dobu.
Start VR by se mohl rozhodnout pro modely s ještě vyšší věrností, než jaké používá nyní. Dřívější implementace objemového zachycení jako Továrna 42“Držte svět“ vzdělávací zkušenost, kterou pořádá David Attenborough, vypadá lépe než Probudit v některých smyslech. Je to proto, že poskytují pouhé tři stupně pohybu ve virtuální realitě. Veškerou pozornost také zaměřují na obličej a horní část těla.
"Mohli byste posunout počet polygonů, který dovolíme [vstoupit." Probudit] jen do obličeje a pak se to stane super vysokým rozlišením,“ vysvětlil Taylor. „Tam volíme nějaké kompromisy. Rozhodli jsme se pro focení celého těla, protože chceme, aby lidé mohli vidět každou část postavy, chodit kolem nich. Viděl jsem lidi, kteří se váleli po podlaze, aby zjistili, zda jsou postavy vytrvalé."
Hraní si s hologramy
Po veškerém úsilí a zvláštní pozornosti potřebné k řemeslu Probuďte se objemový zážitek, konečný výsledek je něco velmi odlišného od toho, na co bude většina hráčů zvyklá. „Textura“ postav se liší od extrémně detailních na jejich tvářích až po drsné a rozmazané v hůře dostupných oblastech. Směs extrémně realistického pohybu a poněkud hranatých modelů nám připomněla vydání Rockstaru z roku 2011, LA Noire svým jedinečným vizuálním stylem. Nebo jako by někdo zabalil UHD video přes obal původní postavy Xboxu.
K dokonalosti má daleko, technologie se potýká zejména s mezerami mezi prsty a chloupky a lehce hranatým obrysem postav. Ale je to podmanivé způsobem, který je vzácné najít ve virtuálním nebo jiném druhu zážitku ze simulované reality, a má obrovský potenciál pro jiný druh interaktivního zážitku.
Zatímco snímky obrazovky Probudit mohou mít podivnou atmosféru údolí, když jste skutečně uvnitř Probuďte se světe, na objemovém zachycení je něco, co této depresi zcela brání. Herci nevypadají dokonale, ale vypadají skutečně, a to se nedá říct ani o těch nejlepších CGI modelech zachycených v pohybu.
"Dokonce i pochopení toho, jak osvětlujeme a řídíme představení, se také změní."
Ono ponoření se do virtuálního světa je také nějak umocněno tím, že vás nutí udělat z něj krok zpět. Nejste účastníkem tohoto světa. Jste voyeur. Pro Start VR to byl plán po celou dobu.
„[Ostatní filmaři] se vždy cítí nuceni, aby se účinkující ve scéně dívali na vás, kameru, a já nevím, jestli to nutně funguje pořád,“ řekl Tietzel Digital Trends. „Pokud se s vámi neustále zachází, jako byste se na vás museli dívat, myslím, že to mění povahu představení i mě myslím, že je vzácné, že skutečně vidíte věrohodné herecké výkony před kamerou a máte na ně reagovat jim."
https://www.facebook.com/startvr/photos/a.558965407540304/1534047166698785/
To neznamená, že se nikdy necítíte zapojeni do scény Probudit. Jsou momenty, speciálně vytvořené, kdy se ocitnete v zorném poli postavy, takže se budete divit, zda vás vidí nebo ne. Nevytrhne vás to ze zážitku, ale připomene vám vaši voyeurskou roli ve scéně. Pokud něco, zvyšuje to, jak osobní je příběh, navzdory jeho náznakům rozsáhlejšího vyprávění přesahujícího tuto první epizodu.
(Lucidní) snění o budoucnosti
Start VR má naplánováno osm epizod Probudit již řadu let, přičemž Taylor již strávil roky vytvářením příběhu, který je osobní i rozsáhlý. Bylo nám řečeno, že jak se tyto epizody rozběhnou, můžeme očekávat spoustu vylepšení.
„Technologie, přesnost a snímková frekvence se dramaticky změní,“ řekl Tietzel Digital Trends. „Dokonce i pochopení toho, jak osvětlujeme a režírujeme představení – jaký je nejlepší způsob, jak dostat z herců v tomto prostoru představení, se také změní. Tohle je zkušenost s učením.”
„Takže jsou chvíle, kdy se postava natáhne, aby vám něco dala. Cítíš se nucen pokusit se jim to sundat?"
Kromě rozšiřování vlastních odborných znalostí o režii herců a vývoj her pro VR funguje také Start VR s Microsoftem, aby pokračovali ve vylepšování techniky objemového snímání a přinášeli do virtuálního světa nové vrásky plátno.
„To, že si vás postava všimne, je jedním ze způsobů, jak vyprávět příběh, a už teď si myslím, že přicházejí varianty, kde můžeme přidat oční linky,“ zdůraznil Taylor. „Spolupracujeme se společností Microsoft, abychom řídili pohyb hlavy postavy, abychom se mohli otočit a uzamknout k vám až asi 30 stupňů na obě strany od zaznamenané pozice […] Také nutí lidi dělat reaktivní věci. Takže jsou chvíle, kdy se postava natáhne, aby vám něco dala. Cítíte se nuceni to zkusit a sundat jim to? Snažíme se o ty různé způsoby, jak se spojit s postavou, než se na ni jen dívat."
Start VR také plánuje experimentovat s více prostředími (Awake: Episode One probíhá téměř výhradně v jednom. Možná jeden a půl), ale je to mimo rámec virtuální reality, kterou Taylor a Tietzel cítí, že jejich experimenty s objemovým zachycením budou nejsnáze pociťovány.
„Už zjišťujeme, co by to mohlo znamenat přenést tento druh zachycení do rozšířené reality, a představení v reálném životě v reálném světě jsou dalším krokem,“ řekl Tietzel. "První testy v této oblasti přinesly některé fascinující výsledky."
Tyto zkušenosti a první epizoda Start VR Probudit zdůraznit vzrušující potenciál objemového zachycení. Vyhýbají se výkonnostní škytavka technologií, jako je sledování paprsků pro realistické osvětlení ve hře a dodejte něco, co je věrohodné zblízka, i když to má ještě pár kazů.
Awake: Episode One je vzrušujícím prvním krokem na narativní cestě, ale je to ještě větší skok pro technologická vylepšení, která pomohla zrodu tohoto světa. Jsme nadšení z čeho Probuďte se příběh a technologie zachycení, do kterých se jeho šampioni mohou vyvinout, a představte si, že jich v budoucnu uvidíme mnohem více.
Awake: Episode One je k dispozici na Parní a Viveport s cenou 8 $.
Probuďte se – upoutávka | Spusťte VR
Doporučení redakce
- Vývojáři říkají, že přinést nejlepší hru Star Wars VR na PlayStation VR2 bylo snadné
- Působivá laserová hra se smíšenou realitou může být novým esem VR
- Pokud chcete Quest 2, kupte si ho, než příští týden výrazně zdraží
- Co Golf? pokračování, Twilight Zone VR a další zobrazené ve streamu UploadVR
- Mezi námi VR, Ghostbusters a další přicházejí do Meta Quest 2