Фотореальные VR-аватары заставят вас усомниться во всем

У Робби Купера, соучредителя Metapixel, есть видение. «Мне нужны полностью анимированные, правдоподобные персонажи в VR-игре или среде, которые реагируют совершенно естественным образом. Ощущать желание протянуть руку и прикоснуться к ним, потому что они такие настоящие. Именно таким должен быть мир виртуальной реальности».

Он не просто мечтает об этом: он и Метапиксель команда на самом деле работает над тем, чтобы сделать это возможным. Используя невероятную камеру и специально разработанное программное обеспечение, Metapixel создает удивительно реалистичные аватары. фотореалистичные функции, основанные на изображениях реального человека с высоким разрешением, готовые для использования в играх, фильмах и вне. Мы посетили офис Metapixel в Брайтоне, Великобритания, чтобы увидеть технологию в действии и создать собственный аватар.

Фотореальный аватар

Камера выглядит как портал в другое измерение; один щелчок затвора — это все, что нужно, чтобы перенести вас через галактики или сквозь время. Есть 102

Камеры Никон Д810 установленные на нем, все они оснащены одним из трех различных объективов — с зумом 50 мм, 85 мм или 72–300 мм.

Связанный

  • Я использовал приложение для создания 3D-моделей на своем iPhone, и оно потрясающе здорово.
  • Система 3D-печати может изготовить бионические руки по индивидуальному заказу менее чем за 10 часов
  • Селфи только что стали 3D с новым режимом камеры Snapchat, который реагирует на движение

Конечно, никакого перемещения по галактике здесь не происходит, но как только затвор спускается, каждая камера делает 36-мегапиксельное изображение объекта в формате RAW практически со всех мыслимых ракурсов. Затем эти снимки передаются в компьютерную систему Metapixel, где они обрабатываются за считанные секунды. В течение следующего часа или около того программа создает на экране потрясающий фотореалистичный аватар, выглядящий точно так же, как объект съемки. На самом деле это техника под названием фотограмметрия, где фотографии, сделанные с разных точек зрения, сшиваются вместе, чтобы сформировать единый 360-градусный рендер, похожий на 3D-сканирование тела.

метапиксельная фотография настоящая аватарка энди 01
метапиксельная фотография настоящая аватарка энди 02

И когда я говорю именно то же самое, я имею в виду именно это. Результат невероятный. Чтобы проверить это, меня пригласили встать в середину буровой установки и навсегда увековечить мое изображение. Вероятно, это первый и единственный раз, когда 102 камеры будут направлены в мою сторону одновременно. Мне сказали смотреть в одну точку и оставаться совершенно неподвижным, слегка вытянув руки вперед. В неловкой манере я ждал, пока камеры включатся, а затем меня ослепила вспышка, когда моя фотография был взят.

Чем реалистичнее выглядит и действует аватар, тем больше вы увлечены происходящим.

Каждое изображение тщательно проверяется на наличие ошибок, нечетного освещения и теней (которые могут сбить с толку компьютер и испортить конечное изображение), а также на отсутствие пропущенных изображений, где камера по какой-либо причине дала сбой. Всю тяжелую работу выполняет собственное программное обеспечение Metapixel под названием Captureing Reality. Он объединяет каждую фотографию и накладывает изображение на сетку, создавая окончательный аватар. На создание первого этапа ушло 10–15 минут, затем еще 20 минут на добавление текстуры и цвета.

В конечном итоге вы получаете картинку, показанную здесь: аватар, настолько реальный, что это пугает. Это также считается только «нормальным» качеством. Есть и другие этапы, которые еще больше повышают уровень детализации. Весь процесс занял меньше часа, включая настройку камеры и обработку.

Возможности

Что можно сделать с вашим идеальным аватаром? Существует масса захватывающих возможностей, но для Купера все дело в виртуальной реальности. «Объедините это с действительно хорошим искусственным интеллектом, и мир станет реальным», — сказал он. Например, по мере совершенствования ИИ, сказал он мне, аватары смогут понимать, куда вы «смотрите» в VR-игре, и реагировать соответствующим образом. Чем реалистичнее выглядит и действует аватар, тем больше вы увлечены происходящим.

метапиксельная фотография настоящая аватарка энди 04
метапиксельная фотография настоящая аватарка энди 010
метапиксельная фотография настоящая аватарка энди 05
метапиксельная фотография настоящая аватарка энди 011

Он отметил работу анимационная студия 3Lateral, где с помощью технологии отслеживания лиц фотореалистичные аватары отражают выражение лица и реакции актера, как доказательство того, над чем уже работают. Столкнуться лицом к лицу с тем, что почти живой, дышащий человек в VR-игре или среде может изменить то, как мы взаимодействуем и сопереживаем внутриигровым персонажам.

В кино также есть захватывающий потенциал. Актер, которого сканируют таким образом, становится по существу бессмертным. Представьте себе актеров, продолжающих работать даже после смерти, или вызывающих сканирование многолетней давности, чтобы разыграть сцену в прошлом. который актер должен выглядеть моложе — все это возможно с помощью воспроизведенного в цифровом виде идентично выглядящего аватар. Он выходит за рамки 3D-анимации и может использовать методы захвата движения.

Объедините сканирование с 3D-принтером, и вы внезапно получите абсолютно идеально выглядящие фигурки. Принесите эту технологию в музеи и учебные заведения, и вы вернетесь к представлению Купера о персонажах, в которых вы верите. Когда-нибудь вы сможете увидеть и услышать, как историческая личность рассказывает историю своей жизни, и искренние эмоции отражаются на лице, которое кажется совершенно человеческим. Это захватывающая вещь, и чем больше вы об этом думаете, тем больше открываются новые возможности.

Почти реальность

Нам еще далеко до того, чтобы увидеть все это в реальности. Metapixel очень быстро прошел долгий путь; Свою первую камеру с 30 камерами компания построила только в конце 2015 года. Несмотря на то, что оно расширилось, работа над специальным программным обеспечением все еще ведется, и в ближайшее время появятся обновления, которые сделают процесс фотосъемки более эффективным. Кроме того, сама VR — ключевая технология Metapixel — все еще находится в зачаточном состоянии.

«Метапиксель» привлекает большое внимание к такой молодой компании и занимается кинопроизводством. компании, разработчикам виртуальной реальности и даже организаторам конференций, чтобы предоставить всем персональные снимки всего тела на USB-накопителе. участники. Представьте себе, что у вас будет возможность использовать этот аватар на конференции, которая пройдет в виртуальной реальности в будущем. Результаты впечатляющие и захватывающие для того, что на самом деле является технологией на ранней стадии. Нам не терпится увидеть его развитие.

Рекомендации редакции

  • Этот монитор 8K оснащен технологией 3D, которую можно просматривать под любым углом.
  • Новые наушники Model One от VZR предлагают геймерам 3D-звук аудиофильского качества
  • Дудлы становятся искусством дополненной реальности с новым инструментом 3D Paint от Snapchat
  • Не можете позволить себе этот штатив за 150 долларов? Просто распечатайте Edelkrone Ortak FlexTilt на 3D-принтере
  • Ikea создает линейку аксессуаров для геймеров, напечатанных на 3D-принтере

Категории

Недавний