Photo-Real VR аватари ще ви накарат да се съмнявате във всичко

Роби Купър, съосновател на Metapixel, има визия. „Искам напълно анимирани, правдоподобни герои във VR игра или среда, които реагират по напълно естествен начин. Да имаш чувството, че искаш да протегнеш ръка и да ги докоснеш, защото са толкова истински. Ето какъв трябва да бъде светът на VR.“

Той не просто мечтае за това: Той и Метапиксел екипът всъщност работи, за да направи това възможно. Използвайки невероятна камера за камера и малко персонализиран софтуер, Metapixel създава удивително реалистични аватари с фотореалистични характеристики, базирани на изображения с висока разделителна способност на действително лице, готови за използване в игри, филми и отвъд. Посетихме офиса на Metapixel в Брайтън, Обединеното кралство, за да видим технологията в действие и да създадем собствен аватар.

Фотореален аватар

Устройството на камерата изглежда като портал към друго измерение; едно щракване на затвора е всичко, което ще ви отнеме, за да ви прехвърли през галактики или във времето. Има 102 Фотоапарати Nikon D810

 монтирани върху него, всички оборудвани с един от трите различни обектива — 50 mm, 85 mm или 72-300 mm увеличение.

Разбира се, не се включва галактика, но след като затворът бъде освободен, всяка камера прави 36-мегапикселова снимка в RAW формат на обекта от почти всеки възможен ъгъл. След това тези снимки се прехвърлят в компютърната система на Metapixel, където се обработват за няколко секунди. В рамките на следващия около час софтуерът създава удивителен фотореален аватар на екрана, изглеждащ точно като обекта. Това всъщност е техника, наречена фотограметрия, където снимки, направени от различни гледни точки, се съединяват, за да образуват един 360-градусов рендер, подобен на 3D сканиране на тяло.

И когато казвам точно като темата, го имам предвид. Резултатът е невероятен. За да го изпробвам, бях поканен да застана в средата на платформата и образът ми да бъде обезсмъртен завинаги. Това вероятно е първият и единствен път, когато 102 камери ще бъдат насочени към мен едновременно. Казаха ми да гледам в една точка и да остана напълно неподвижен, с леко протегнати ръце по неудобен начин, изчаках, докато камерите бяха заредени - тогава бях заслепен от светкавица, докато моята снимка Беше взето.

Всяка снимка се проверява внимателно за грешки, странно осветление и сенки (които могат да объркат компютъра и да съсипят крайното изображение), както и за липсващи изображения, когато камерата по някаква причина не е задействала. След това собственият софтуер на Metapixel, наречен Capturing Reality, върши цялата тежка работа. Той обединява всяка снимка и картографира изображението върху мрежа, изграждайки крайния аватар. Отне 10 до 15 минути за изграждане на първия етап, след това още 20 за добавяне на текстурата и цвета.

Завършвате със снимката, която виждате тук, аватар, толкова реален, че е плашещ. Също така се счита само за „нормално“ качество. Има и други етапи, които повишават още повече нивото на детайлност. Целият процес отне по-малко от час, включително цялата настройка на камерата и обработката.

Възможностите

Какво може да се направи с перфектния ви аватар? Има много вълнуващи възможности, но за Купър всичко е свързано с виртуалната реалност. „Комбинирайте това с наистина добър изкуствен интелект и светът ще стане реален“, каза той. Например, когато AI се подобрява, каза ми той, аватарите могат да разберат къде „гледате“ във VR игра и да реагират по съответния начин. Колкото по-реалистично изглежда и действа аватарът, толкова повече сте ангажирани със случващото се.

Той посочи работата на анимационно студио 3Lateral, където чрез използване на технология за проследяване на лица, фото-реални аватари отразяват изражението на лицето и реакциите на актьор, като доказателство за това, върху което вече се работи. Да се ​​изправиш лице в лице с това, което е почти жив, дишащ човек в VR игра или среда има потенциала да промени начина, по който взаимодействаме и съчувстваме на героите в играта.

Във филмите също има вълнуващ потенциал. Актьор, който е сканиран по този начин, по същество става безсмъртен. Представете си актьори, които продължават да работят дори след смъртта си или извикват сканиране от преди години, за да изиграят сцена в които актьорът трябва да изглежда по-млад - всичко това е възможно с дигитално възпроизведен, идентично изглеждащ аватар. Той отива една крачка отвъд 3D анимацията и може да използва техниките, наблюдавани при улавяне на движение.

Комбинирайте сканирането с 3D принтер и изведнъж ще получите абсолютно перфектно изглеждащи екшън фигурки. Пренесете технологията в музеи и учебни среди и ще се върнете към визията на Купър за героите, в които вярвате. Може някой ден да видите и чуете историческа личност да разказва историята на живота си, с истинска емоция, регистрирана върху лице, което изглежда напълно човешко. Това са вълнуващи неща и възможностите продължават да се появяват, колкото повече мислите за тях.

Почти реалност

Все още сме малко от това да видим всичко това в реалност. Метапикселът измина дълъг път много бързо; компанията построи първата си камера за камери, с 30 камери по това време, едва в края на 2015 г. Въпреки че се разшири, персонализираният софтуер все още се работи и скоро има надстройки, които да направят процеса на заснемане на снимки по-ефективен. Освен това самата VR – ключовата движеща технология за Metapixel – все още е в начален стадий.

Metapixel привлича много внимание за толкова млада компания и работи с филмова продукция компания, разработчици на VR и дори организатори на конференции, за да предоставят лични сканирания на цялото тяло на USB стик на всички участници. Представете си, че имате шанса да използвате този аватар на конференция, провеждана във виртуална реалност в бъдеще. Резултатите са впечатляващи и вълнуващи за това, което наистина е технология на ранен етап. Нямаме търпение да видим как се развива.

Препоръки на редакторите

• Този 8K монитор разполага с 3D технология, която може да се гледа от всички ъгли
• Новите слушалки Model One на VZR предоставят аудиофилски 3D звук на геймърите
• Драскулките се превръщат в изкуство с добавена реалност с новия инструмент 3D Paint на Snapchat
• Не можете да си позволите тази глава за триножник за $150? Просто отпечатайте 3D Edelkrone Ortak FlexTilt
• Ikea създава гама от 3D отпечатани аксесоари за достъпност за геймърите