Роббі Купер, співзасновник Metapixel, має бачення. «Я хочу повністю анімованих, правдоподібних персонажів у VR-грі чи середовищі, які реагують абсолютно природно. Відчути бажання доторкнутися до них, тому що вони такі справжні. Таким має бути світ віртуальної реальності».
Він не просто мріє про це: він і всі Метапіксель команда насправді працює над тим, щоб зробити це можливим. Використовуючи неймовірну камеру та деяке спеціальне програмне забезпечення, Metapixel створює неймовірно реалістичні аватари з фотореалістичні функції, засновані на зображеннях реальної людини з високою роздільною здатністю, готові для використання в іграх, фільмах і поза межами. Ми відвідали офіс Metapixel у Брайтоні, Великобританія, щоб побачити технологію в дії та створити власний аватар.
Фотореальний аватар
Камера виглядає як портал в інший вимір; єдине клацання затвора – це все, що вам знадобиться, щоб перенести вас через галактики чи час. Є 102 Фотоапарати Nikon D810 встановлені на ньому, усі вони оснащені одним із трьох різних об’єктивів — 50 мм, 85 мм або 72-300 мм.
Пов'язані
- Я використовував програму для створення 3D-моделей на своєму iPhone, і вона неймовірно чудова
- Система 3D-друку може виплеснути спеціально підігнані біонічні руки менш ніж за 10 годин
- З новим режимом камери Snapchat, який реагує на рух, Селфі стали 3D
Звісно, галактика не задіяна, але після спуску затвора кожна камера робить 36-мегапіксельний знімок об’єкта у форматі RAW майже з усіх можливих кутів. Потім ці знімки передаються в комп’ютерну систему Metapixel, де вони обробляються за лічені секунди. Протягом наступної години або близько того програмне забезпечення створює дивовижний фотореальний аватар на екрані, який виглядає точно так само, як об’єкт зйомки. Насправді це техніка під назвою фотограмметрія, де фотографії, зроблені з різних точок зору, зшиваються разом, щоб утворити єдину візуалізацію на 360 градусів, подібну до 3D-сканування тіла.
І коли я говорю точно так само, як предмет, я маю на увазі це. Результат неймовірний. Щоб перевірити це, мене запросили стати в середину платформи, щоб моє зображення увічнилося назавжди. Ймовірно, це перший і єдиний раз, коли 102 камери будуть спрямовані в мій бік одночасно. Сказали дивитися в одну точку й залишатися абсолютно нерухомим, трохи розставивши руки незручно, я дочекався, поки камери ввімкнуться, а потім я був засліплений спалахом, оскільки моя фотографія було прийнято.
Чим реалістичніше виглядає та діє аватар, тим більше ви зацікавлені в тому, що відбувається.
Кожне зображення ретельно перевіряється на наявність помилок, неправильного освітлення та тіней (що може заплутати комп’ютер і зіпсувати кінцеве зображення), а також на відсутність будь-яких зображень, коли камера з якоїсь причини спрацювала. Власне програмне забезпечення Metapixel під назвою Capturing Reality виконує всю важку роботу. Він об’єднує кожну фотографію та наносить зображення на сітку, створюючи остаточний аватар. На створення першого етапу знадобилося 10-15 хвилин, а потім ще 20, щоб додати текстуру та колір.
Зрештою ви отримуєте картинку, яку бачите тут, аватар настільки реальний, що аж лякає. Це також вважається лише «нормальною» якістю. Існують інші етапи, які ще більше підвищують рівень деталізації. Весь процес зайняв менше години, включаючи всі налаштування камери та обробку.
Можливості
Що можна зробити з ідеальним аватаром? Є маса захоплюючих можливостей, але для Купера все — віртуальна реальність. «Поєднайте це з дійсно хорошим штучним інтелектом, і світ стане реальним», — сказав він. Наприклад, він сказав мені, що у міру вдосконалення штучного інтелекту аватари можуть розуміти, куди ви «дивитесь» у VR-грі, і реагувати відповідно. Чим реалістичніше виглядає та діє аватар, тим більше ви зацікавлені в тому, що відбувається.
Він відзначив роботу в анімаційна студія 3Lateral, де за допомогою технології відстеження обличчя фотореалістичні аватари відображають вирази обличчя та реакції актора, як доказ того, над чим уже ведеться робота. Зіткнутися віч-на-віч з тим, що майже жива, дихаюча людина у грі чи середовищі віртуальної реальності може змінити спосіб взаємодії та співпереживання персонажам у грі.
У кіно також є захоплюючий потенціал. Актор, якого сканують таким чином, стає по суті безсмертним. Уявіть, що актори продовжують працювати навіть після своєї смерті або викликають сканування багаторічної давності, щоб розіграти сцену в який актор повинен виглядати молодшим — все це можливо завдяки цифровому відтворенню ідентичного вигляду аватар. Він виходить на крок за межі 3D-анімації та може використовувати методи захоплення руху.
Поєднайте сканування з 3D-принтером, і ви раптом отримаєте абсолютно ідеальні фігурки. Внесіть технологію в музеї та навчальні середовища, і ви повернетеся до бачення Купера персонажів, у яких ви вірите. Можливо, ви колись побачите й почуєте, як історична особа розповідає історію свого життя, зі справжніми емоціями на обличчі, яке виглядає цілком людським. Це захоплююча річ, і чим більше ви про це думаєте, тим більше з’являються можливості.
Майже реальність
Нам ще трохи від того, щоб побачити все це в реальності. Метапіксель пройшов довгий шлях дуже швидко; лише наприкінці 2015 року компанія побудувала свою першу камерну установку з 30 камерами на той час. Незважаючи на те, що він розширився, над спеціальним програмним забезпеченням все ще працюють, і незабаром з’являться оновлення, які зроблять процес фотозйомки ефективнішим. Крім того, сама VR — ключова рушійна технологія для Metapixel — все ще перебуває в зародковому стані.
Metapixel привертає багато уваги для такої молодої компанії, і вона працює над виробництвом фільмів компаній, розробників віртуальної реальності та навіть організаторів конференцій, щоб надати всім особисті скани всього тіла на USB-накопичувачі учасників. Уявіть собі можливість використати цей аватар на конференції у віртуальній реальності в майбутньому. Результати вражаючі та захоплюючі для того, що насправді є технологією на ранній стадії. Ми не можемо дочекатися його розвитку.
Рекомендації редакції
- Цей монітор 8K має технологію 3D, яку можна переглядати з усіх кутів
- Нові навушники Model One від VZR забезпечують геймерам аудіофільську якість 3D-звуку
- Дудли стають мистецтвом доповненої реальності завдяки новому інструменту 3D Paint від Snapchat
- Не можете дозволити собі цей штатив за 150 доларів? Просто надрукуйте 3D Edelkrone Ortak FlexTilt
- Ikea створює лінійку надрукованих на 3D-принтерах аксесуарів для геймерів
