Я использовал приложение для создания невероятных 3D-моделей на своем iPhone.

Темпы инноваций в создании изображений с помощью искусственного интеллекта феноменальны. Одна компания — Luma Labs — представляет собой отличный пример практического, но чрезвычайно интересного использования новейших технологий, применяемых к 3D-изображениям.

Лума ИИ находится на стадии бета-тестирования на iPhone и в конечном итоге будет доступен на Андроид также. Я попал в группу бета-тестирования и могу поделиться некоторой информацией о том, что делает это удивительное приложение и как легко получить невероятные результаты.

Что такое Лума ИИ?

Luma AI — это приложение и сервис, разработанный Luma Labs. Он захватывает трехмерные изображения, используя технику, известную как Neural Radiance Fields (NeRF). Это похоже на технику трассировки лучей, которая делает графику в высококлассных играх такой реалистичной.

NeRF существуют уже несколько лет, но до недавнего времени существовали в основном в исследовательских учреждениях. Со взрывом Генерация изображений с помощью искусственного интеллекта, озаглавленная фотореалистичными рендерингами Dall-E, NeRFs начинает изучать гораздо более широкая аудитория. Первая волна нового программного обеспечения NeRF потребовала некоторых навыков разработчика и установка пакетов программного обеспечения с GitHub, затем обучение ИИ. на серии фотографий. Это было слишком много для обычного человека.

Luma Labs собирается значительно упростить этот процесс с помощью своего приложения Luma AI. От начала до конца всем процессом можно управлять с iPhone, а конечный результат становится более доступным.

Совместимость Luma AI с iPhone

Поскольку Apple поставила перед собой задачу продемонстрировать возможности датчиков LiDAR по измерению глубины в 3D, можно ожидать, что для искусственного интеллекта Luma потребуется более дорогой айфон 14 про или айфон 14 про макс для захвата 3D-моделей. Однако умные разработчики из Luma Labs вместо этого используют искусственный интеллект. Это делает эту технологию совместимой с такими старыми iPhone, как iPhone 11.

В будущем приложение станет доступно на Android, а веб-версия уже находится в стадии бета-тестирования. В интервью генеральный директор Luma Labs Амит Джайн сообщил, что приложение для iPhone, как ожидается, будет готово к публичному выпуску через несколько недель.

Как использовать Luma AI

Чтобы использовать Luma AI, вы просто медленно кружите вокруг объекта на трех разных высотах. Наложение дополненной реальности проведет вас через весь процесс, который займет несколько минут и станет проще после нескольких попыток, когда вы освоитесь с процессом. Вскоре вы сможете за пару минут сфотографировать объект среднего размера, например стул.

Можно обрабатывать объекты любого размера, потому что для Luma AI это просто серия изображений — независимо от того, насколько велик объект. Если вы обведете чашку, статую или здание, общая идея останется той же.

Приложение сообщит вам, когда в нем будет достаточно изображений, и когда это произойдет, появится кнопка «Готово». Вы также можете продолжать кружить и заполнение пробелов в AR-облаке колец и прямоугольников которые представляют фотографии, сделанные на данный момент. Приложение автоматически остановит съемку, когда будет собрано идеальное количество фотографий. Также имеется режим произвольной формы, который позволяет делать еще больше фотографий под разными углами и расстояниями. Вы можете увидеть процесс в видео на YouTube, которое я создал ниже. Это приложение для iPhone, поэтому это портретное видео.

Обработка — это следующий шаг, который происходит на серверах Luma Labs. Примерно через час готовый NeRF будет доступен в приложении в нескольких различных формах. Первое представленное изображение представляет собой сгенерированное видео, показывающее пролет объекта в его естественной среде. Следующей является интерактивная версия, позволяющая вращать изображение, перетаскивая палец или мышь по изображению.

Самое впечатляющее то, что доступен объект съемки, извлеченный из фона. С помощью этого представления вы можете поворачивать 3D-объект по любой оси и увеличивать масштаб, чтобы рассмотреть его поближе. Резкость зависит от того, сколько изображений было собрано и насколько медленным и стабильным был процесс захвата.

Все время становится лучше

Luma Labs обновляет приложение и сервис с поразительной скоростью. В течение недели после получения приглашения на бета-тестирование были добавлены две новые мощные функции, значительно расширяющие возможности. Первый — это вариант загрузки через Интернет, который позволяет снимать видео без приложения, а затем загружать его на веб-сайт Luma Labs для обработки. Результаты появляются онлайн и в приложении.

Это означает, что можно использовать любой из режимов камеры iPhone, снимать видео с помощью специальной камеры или даже записывать видео с помощью очков дополненной реальности, таких как Ray-Ban Stories. Например, видео с дрона становится еще более эпичным, если вы можете сгладить движение и изменить направление уже после приземления. В этом твите Luma Labs поделилась хорошим примером, показывающим вид осенних листьев с воздуха.

Осень в Пало-Альто прекрасна! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Лума ИИ (@LumaLabsAI) 22 октября 2022 г.

Другая новая функция открывает возможности 3D-редактирования, рисования и 3D-печати. 3D-сетки можно экспортировать с текстурами в формате OBJ или GLTF. Они не оптимизированы, но их можно просматривать с неповрежденными текстурами даже с помощью онлайн-просмотрщика, такого как бесплатный веб-сайт с открытым исходным кодом. Онлайн3DViewer.

Также можно открыть 3D-файлы в редакторе сеток, например в бесплатном редакторе с открытым исходным кодом. МешЛаб удалить любые случайные артефакты, которые выглядят как плавающие капли, а также очистить и упростить модель перед экспортом в различные форматы. Фигурка, показанная выше, имеет высоту около трех дюймов и была вылеплена моей женой Трейси для ее бизнеса. AМаленькийПерсонаж. Luma AI уловил поразительное количество деталей в скульптуре и бревне, на котором она стояла. Журнал также мог быть выбран и удален MeshLab.

Плюсы и минусы 3D-сканирования

Кайл Брюссел поделился демонстрацией десерта с вечеринки, упомянув, что попросил взрослых подождать угощения, чтобы он мог запечатлеть его в виде цифровой диорамы.

Использовал @LumaLabsAI Вчера вечером на вечеринке по случаю дня рождения я заставил группу взрослых не есть десерт, чтобы я мог кружить по столу с помощью телефона и воплотить в жизнь 3D-ИИ, мечтающий об установке, как очень крутой человек pic.twitter.com/sP0vVPB3yx

— Кайл Рассел (@kylebrussell) 30 октября 2022 г.

Хотя Luma AI может обрабатывать видео, для построения трехмерной сцены он опирается на неподвижные изображения. Это означает, что если объект движется, это может снизить качество или четкость съемки. 3D-изображение сидящего человека, как показано в твите Альберта Бозесана, подойдет. В том же твите второй снимок скульптуры показывает, что происходит, когда внутри сцены происходит движение. На заднем плане изображены люди, проходившие рядом с объектом, в виде искаженных фигур.

Взял два @LumaLabsAI#NeRFs сегодня у баварского озера. Отличный способ сохранить воспоминания, похоже на «Отчет меньшинства». #Тегернзееpic.twitter.com/HLC0ekF7uD

— Альберт Бозесан (@AlbertBozesan) 30 октября 2022 г.

Цена и доступность Luma AI

Luma AI в настоящее время находится на стадии бета-тестирования, и приглашения периодически рассылаются через сайт компании. Твиттер счет. Если у вас есть совместимый iPhone и вы интересуетесь этой технологией, возможно, вы сможете получить ранний доступ. Также есть список ожидания Лума Лабс» Веб-сайт.

Генеральный директор Luma Labs Джайн отметил, что цены еще не определены и зависят от того, насколько широкой окажется база пользователей и как будут использоваться результаты сканирования. Судя по этим утверждениям, может существовать профессиональная подписка с более расширенными функциями и личная подписка за меньшие деньги. На данный момент его использование останется бесплатным.

Рекомендации редакции

• Apple может столкнуться с «серьезной» нехваткой iPhone 15 из-за проблем с производством, говорится в отчете
• Я буду в ярости, если iPhone 15 Pro не получит этой функции
• Я пытался заменить свою GoPro этим новым телефоном и его умной камерой.
• Этот небольшой гаджет предлагает лучшие функции iPhone 14 за 149 долларов.
• Я надеюсь, что Apple внедрит эту функцию Vision Pro на iPhone.

Обновите свой образ жизниDigital Trends помогает читателям быть в курсе быстро меняющегося мира технологий благодаря всем последним новостям, забавным обзорам продуктов, содержательным редакционным статьям и уникальным кратким обзорам.