Я використовував програму для створення неймовірних 3D-моделей на своєму iPhone

Швидкість інновацій у створенні зображень за допомогою штучного інтелекту феноменальна. Одна компанія — Luma Labs — є чудовим прикладом практичного, але надзвичайно цікавого використання новітніх технологій, застосованих до 3D-зображень.

Лума А.І перебуває на етапі бета-тестування на iPhone і з часом буде доступний на Android так само. Я потрапив у групу бета-тестів і можу поділитися деякою інформацією про те, що робить цей чудовий додаток і як легко отримати неймовірні результати.

Що таке Luma AI?

Luma AI — це додаток і сервіс, розроблений Luma Labs. Він фіксує тривимірні зображення за допомогою техніки, відомої як поля нейронного випромінювання (NeRF). Це схоже на техніку трасування променів, яка робить графіку в висококласних іграх такою реалістичною.

NeRF існують уже кілька років, але донедавна існували переважно в дослідницьких установах. З вибухом Генерація зображень штучним інтелектом із фотореалістичними візуалізаціями Dall-E, NeRF починає вивчати набагато ширша аудиторія. Перша хвиля нового програмного забезпечення NeRF вимагала певних навичок розробника та встановлення програмних пакетів з GitHub, потім навчання А.І. на набір фотографій. Це було небагато для звичайної людини.

Luma Labs збирається значно спростити цей процес за допомогою програми Luma AI. Від початку до кінця всім процесом можна керувати з iPhone, а кінцевий результат також стає доступнішим.

Сумісність Luma AI iPhone

Оскільки Apple продемонструвала можливості вимірювання глибини в 3D датчиками LiDAR, можна очікувати, що Luma AI вимагатиме дорожчого iPhone 14 Pro або iPhone 14 Pro Max для зйомки 3D-моделей. Однак розумні розробники з Luma Labs замість цього використовують штучний інтелект. Це робить цю технологію сумісною з такими старими iPhone, як iPhone 11.

У майбутньому додаток стане доступним для Android, а також уже є веб-версія в стадії бета-тестування. В інтерв’ю генеральний директор Luma Labs Аміт Джейн сказав, що додаток для iPhone буде готовий до публічного випуску через кілька тижнів.

Як використовувати Luma AI

Щоб використовувати Luma AI, ви просто повільно кружляєте навколо об’єкта на трьох різних висотах. AR-накладка проведе вас через процес, який займає кілька хвилин і стає легшим після кількох спроб, коли ви ознайомитеся з процесом. Незабаром ви зможете зняти об’єкт середнього розміру, як-от стілець, за пару хвилин.

Можна працювати з об’єктами будь-якого розміру, оскільки для Luma AI це лише серія зображень — незалежно від того, наскільки великий об’єкт. Якщо обвести чашку, статую або будівлю, загальна ідея залишається незмінною.

Програма повідомить вас, коли в ній буде достатньо зображень, і коли це станеться, з’явиться кнопка «Готово». Ви також можете продовжувати обводити і заповнення прогалин у AR-хмарі кілець і прямокутників які представляють фотографії, зроблені на даний момент. Програма автоматично припинить зйомку, коли буде зібрано ідеальну кількість фотографій. Існує також режим довільної форми, який дозволяє робити ще більше фотографій під різними кутами та на різних відстанях. Ви можете побачити процес у відео на YouTube, яке я створив нижче. Це програма для iPhone, тому це портретне відео.

Обробка — це наступний крок, який відбувається на серверах Luma Labs. Приблизно через годину готовий NeRF буде доступний у додатку в кількох різних формах. Перший наданий вид – це згенероване відео, яке показує проліт об’єкта в його природному середовищі. Наступна інтерактивна версія дає змогу обертати перегляд, перетягуючи пальцем або мишею по зображенню.

Найбільш вражаючим з усіх є те, що об’єкт зйомки, витягнутий із фону, також доступний. За допомогою цього представлення ви можете повертати 3D-об’єкт навколо будь-якої осі та збільшувати масштаб, щоб побачити його ближче. Різкість залежить від кількості зібраних зображень і від того, наскільки повільно та стабільно ви працювали під час зйомки.

Весь час стає краще

Luma Labs надзвичайно швидко оновлює додаток і сервіс. Протягом тижня після отримання запрошення на бета-тестування було додано дві нові потужні функції, які значно розширюють можливості. Перший — це варіант завантаження в Інтернет, який дозволяє знімати відео без програми, а потім завантажувати його на веб-сайт Luma Labs для обробки. Результати з’являються онлайн і в додатку.

Це означає, що можна використовувати будь-який із режимів камери iPhone, знімати відео спеціальною камерою або навіть записувати відео за допомогою окулярів AR, як-от Ray-Ban Stories. Наприклад, відео з дрона стає ще більш епічним, коли ви можете згладити рух і змінити напрямок після того, як ви вже приземлилися. У цьому твіті Luma Labs поділилися хорошим прикладом зображення осіннього листя з висоти пташиного польоту.

Осінь у Пало-Альто чудова! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22 жовтня 2022 р

Інша нова функція відкриває можливості для 3D-редагування, малювання та 3D-друку. 3D-сітки можна експортувати з текстурами у форматі OBJ або GLTF. Вони не оптимізовані, але їх можна переглядати з незмінними текстурами навіть за допомогою онлайн-переглядача, наприклад безкоштовного веб-сайту з відкритим кодом Онлайн 3DViewer.

Також можна відкривати 3D-файли в сітчастому редакторі, наприклад у безкоштовному з відкритим кодом MeshLab щоб видалити будь-які випадкові артефакти, які виглядають як плаваючі краплі, а також очистити та спростити модель перед експортом у різні формати. Представлена ​​вище фігурка має близько трьох дюймів заввишки і була виліплена моєю дружиною Трейсі для її бізнесу, ALittleCharacter. Luma AI зафіксував надзвичайну кількість деталей у скульптурі та колоді, на якій вона трималася. Журнал також міг бути обраний і видалений MeshLab.

Плюси та мінуси 3D-сканування

Кайл Брюсселл поділився демонстрацією десертів із вечірки, згадавши, що він попросив дорослих зачекати на частування, щоб він міг зафіксувати це як цифрову діораму.

б/в @LumaLabsAI на вечірці з нагоди дня народження вчора ввечері змусив дорослих не їсти десерт, щоб я міг обвести стіл навколо столу з телефоном, щоб зробити 3D AI мрію про налаштування, як дуже крута людина pic.twitter.com/sP0vVPB3yx

— Кайл Рассел (@kylebrussell) 30 жовтня 2022 р

Хоча Luma AI може обробляти відео, він покладається на нерухомі зображення для створення тривимірної сцени. Це означає, що якщо об’єкт рухається, це може погіршити якість або чіткість зйомки. Тривимірне зображення людини, яка сидить, як показано в твіті Альберта Бозезана, буде хорошим. У тому ж твіті другий знімок скульптури показує, що відбувається, коли в сцені відбувається рух. На задньому плані зображені люди, які йшли біля об’єкта, як спотворені форми.

Взяв два @LumaLabsAI#NeRFs сьогодні біля баварського озера. Чудовий спосіб зберегти спогади, схоже на Minority Report. #Тегернзееpic.twitter.com/HLC0ekF7uD

— Альберт Бозесан (@AlbertBozesan) 30 жовтня 2022 р

Luma AI ціна та наявність

Зараз Luma AI перебуває на етапі бета-тестування, і компанія періодично надсилає запрошення Twitter рахунок. Якщо у вас є сумісний iPhone і ви зацікавлені в цій технології, ви можете отримати ранній доступ. Також є список очікування Luma Labs веб-сайт.

Генеральний директор Luma Labs Джейн зазначив, що ціна ще не визначена і залежить від того, наскільки широкою буде база користувачів і як використовуються результати сканування. Виходячи з цих тверджень, може бути професійна підписка з більш розширеними функціями та персональна підписка за меншу суму. На даний момент він залишатиметься безкоштовним для використання.

Рекомендації редакції

• Apple може зіткнутися з «серйозною» нестачею iPhone 15 через проблему виробництва, йдеться у звіті
• Я буду розлючений, якщо iPhone 15 Pro не отримає цієї функції
• Я намагався замінити свій GoPro цим новим телефоном і його розумною камерою
• Цей маленький гаджет надає вам найкращі функції iPhone 14 за 149 доларів
• Я сподіваюся, що Apple принесе цю функцію Vision Pro на iPhone

Оновіть свій спосіб життяDigital Trends допомагає читачам стежити за динамічним світом технологій завдяки всім останнім новинам, цікавим оглядам продуктів, проникливим редакційним статтям і унікальним у своєму роді коротким оглядам.