Avataři Photo-Real VR vás donutí zpochybnit všechno

Robbie Cooper, spoluzakladatel Metapixel, má vizi. „Chci plně animované, uvěřitelné postavy ve hře nebo prostředí VR, které reagují naprosto přirozeným způsobem. Mít ten pocit, že se jich chcete natáhnout a dotknout se jich, protože jsou tak skutečné. Takový by měl být svět VR."

Nejen o tom sní: On a oni Metapixel tým skutečně pracuje na tom, aby to bylo možné. Metapixel pomocí neuvěřitelného fotoaparátu a speciálního softwaru vytváří neuvěřitelně živé avatary s fotorealistické funkce, založené na obrázcích skutečné osoby ve vysokém rozlišení, připravené k použití ve hrách, filmech a mimo. Navštívili jsme kancelář Metapixel v Brightonu ve Spojeném království, abychom viděli technologii v akci a nechali si vytvořit vlastního avatara.

Foto-skutečný avatar

Kamera vypadá jako portál do jiné dimenze; jediné cvaknutí závěrky je vše, co bude trvat, aby vás přemístil napříč galaxiemi nebo časem. Je jich 102 Fotoaparáty Nikon D810 namontované na něm, všechny vybavené jedním ze tří různých objektivů – 50mm, 85mm nebo 72-300mm zoom.

Příbuzný

  • Použil jsem aplikaci k vytvoření 3D modelů s mým iPhone a je to překvapivě skvělé
  • Systém 3D tisku dokáže vyplivnout bionické ruce na míru za méně než 10 hodin
  • Selfie právě přešly do 3D s novým režimem fotoaparátu Snapchat, který reaguje na pohyb

Samozřejmě se nejedná o žádné přepínání galaxií, ale jakmile je tato závěrka spuštěna, každý fotoaparát pořídí 36megapixelový snímek objektu ve formátu RAW z téměř všech myslitelných úhlů. Tyto záběry jsou poté přeneseny do počítačového systému Metapixel, kde jsou zpracovány během několika sekund. Během přibližně další hodiny software vytvoří na obrazovce úžasný fotoreálný avatar, který vypadá přesně jako předmět. Je to vlastně technika tzv fotogrammetrie, kde jsou fotografie pořízené z různých úhlů spojeny dohromady a tvoří jeden 360stupňový render podobný 3D skenování těla.

metapixel fotografie skutečný avatar rig andy 01
metapixel fotografie skutečný avatar rig andy 02

A když říkám přesně jako předmět, myslím to vážně. Výsledek je neskutečný. Abych to otestoval, byl jsem pozván, abych se postavil doprostřed plošiny a nechal si svůj obraz navždy zvěčnit. Je to pravděpodobně první a jediný případ, kdy bude mým směrem namířeno 102 kamer současně. Řekl jsem, abych zíral na jediný bod a zůstal úplně nehybný, s rukama mírně roztaženýma nepohodlným způsobem jsem čekal, až byly fotoaparáty připraveny – pak mě oslepil blesk jako moje fotka byla pořízena.

Čím realističtěji avatar vypadá a působí, tím více se zabýváte tím, co se děje.

Každý obrázek je pečlivě zkontrolován na chyby, neobvyklé osvětlení a stíny (které mohou zmást počítač a zničit konečný obrázek) a na chybějící obrázky, kde fotoaparát z nějakého důvodu selhal. Vlastní software Metapixel, nazvaný Capturing Reality, pak dělá veškerou těžkou práci. Spojí každou fotografii a namapuje obrázek na síť, čímž vytvoří konečného avatara. Vytvoření první fáze trvalo 10 až 15 minut, poté dalších 20 minut, než se přidala textura a barva.

Skončíte s obrázkem, který vidíte zde, avatarem tak skutečným, že je to děsivé. Je také považována pouze za „normální“ kvalitu. Existují další stupně, které úroveň detailů ještě zvyšují. Celý proces trval necelou hodinu, včetně veškerého nastavení fotoaparátu a zpracování.

Možnosti

Co lze udělat s vaším dokonalým avatarem? Existuje spousta vzrušujících možností, ale pro Coopera je to všechno o virtuální realitě. „Zkombinujte to s opravdu dobrou umělou inteligencí a svět se stane skutečným,“ řekl. Například jak se AI zlepšuje, řekl mi, avataři by mohli pochopit, kam se ve hře VR „díváte“, a podle toho reagovat. Čím realističtěji avatar vypadá a působí, tím více se zabýváte tím, co se děje.

metapixel fotografie skutečný avatar rig andy 04
metapixel photo real avatar rig andy 010
metapixel fotografie skutečný avatar rig andy 05
metapixel fotografie skutečný avatar rig andy 011

Poukázal na práci o animační studio 3 Lateral, kde pomocí technologie sledování tváře zrcadlí fotoreální avataři výrazy obličeje a reakce herce jako důkaz toho, na čem se již pracuje. Setkat se tváří v tvář s tím, co je téměř živý, dýchající člověk ve VR hře nebo prostředí má potenciál změnit způsob, jakým interagujeme a vcítíme se do herních postav.

Ve filmech je také vzrušující potenciál. Takto naskenovaný herec se stává v podstatě nesmrtelným. Představte si, že herci pokračují v práci i po své smrti nebo vyvolávají sken z doby před lety, aby zahráli scénu od herce se vyžaduje, aby vypadal mladší – to vše je možné s digitálně reprodukovaným, stejně vypadajícím avatar. Jde o krok nad rámec 3D animace a může používat techniky, které lze vidět při snímání pohybu.

Zkombinujte skenování s 3D tiskárnou a máte rázem naprosto dokonale vypadající akční figurky. Přineste technologii do muzeí a výukových prostředí a vrátíte se k Cooperově vizi postav, kterým věříte. Možná jednoho dne uvidíte a uslyšíte, jak historická osoba vypráví příběh o svém životě, s opravdovými emocemi na tváři, která vypadá jako zcela lidská. Je to vzrušující věc a možnosti se objevují, čím více o tom přemýšlíte.

Téměř realita

Ještě chvíli nás dělí od toho, abychom to všechno viděli ve skutečnosti. Metapixel ušel dlouhou cestu velmi rychle; společnost teprve na konci roku 2015 postavila svůj první kamerový systém s 30 kamerami. I když se rozšířil, na zákaznickém softwaru se stále pracuje a již brzy budou aktualizovány, aby byl proces fotografování efektivnější. Kromě toho samotná VR – klíčová technologie pro Metapixel – je stále v plenkách.

Metapixel přitahuje na tak mladou společnost spoustu pozornosti a spolupracuje s filmovou produkcí společnosti, vývojářům VR a dokonce i organizátorům konferencí, aby všem dodali osobní skenování celého těla na USB klíči účastníků. Představte si, že byste v budoucnu měli možnost použít tohoto avatara na konferenci pořádané ve virtuální realitě. Výsledky jsou působivé a vzrušující na to, co je skutečně v rané fázi technologie. Nemůžeme se dočkat, až se to bude vyvíjet.

Doporučení redakce

  • Tento 8K monitor má 3D technologii, kterou lze sledovat ze všech úhlů
  • Nová sluchátka VZR Model One přinášejí hráčům 3D zvuk v audiofilské kvalitě
  • Sváteční loga se stávají uměním rozšířené reality s novým nástrojem Snapchat 3D Paint
  • Nemůžete si dovolit tuto stativovou hlavu za 150 $? Stačí 3D tisk Edelkrone Ortak FlexTilt
  • Ikea vytváří řadu 3D tištěných doplňků pro usnadnění pro hráče