Am folosit o aplicație pentru a crea modele 3D incredibile cu iPhone-ul meu

Ritmul inovației în generarea de imagini cu inteligența artificială este fenomenal. O companie – Luma Labs – oferă un exemplu excelent de utilizare practică, dar extrem de distractivă a celei mai noi tehnologii aplicate imaginilor 3D.

Luma AI este în testare beta pe iPhone și în cele din urmă va fi disponibil pe Android de asemenea. Am intrat în grupul de testare beta și pot împărtăși câteva informații despre ceea ce face această aplicație uimitoare și cât de ușor este să obții rezultate incredibile.

Ce este Luma AI?

Luma AI este o aplicație și un serviciu dezvoltat de Luma Labs. Captează imagini tridimensionale folosind o tehnică cunoscută sub numele de Neural Radiance Fields (NeRF). Este similar cu tehnica de urmărire a razelor care face ca grafica din jocurile de ultimă generație să pară atât de realiste.

NeRF-urile există de câțiva ani, dar au existat în principal în unitățile de cercetare până de curând. Odată cu explozia de Generarea de imagini AI, afișată de redări fotorealiste Dall-E, NeRF-urile încep să fie explorate de un public mult mai larg. Primul val de software NeRF a necesitat niște abilități de dezvoltator și instalarea pachetelor software din GitHub, apoi antrenarea A.I. pe un set de fotografii. A fost un pic cam mult pentru omul obișnuit.

Luma Labs este pe cale să simplifice dramatic procesul cu aplicația sa Luma AI. De la început până la sfârșit, întregul proces poate fi gestionat de pe un iPhone, iar rezultatul final este și mai accesibil.

Compatibilitate Luma AI iPhone

Deoarece Apple și-a propus să demonstreze capabilitățile de măsurare a adâncimii 3D ale senzorilor LiDAR, s-ar putea să vă așteptați ca Luma AI să necesite cele mai scumpe iPhone 14 Pro sau iPhone 14 Pro Max pentru a captura modele 3D. Cu toate acestea, dezvoltatorii inteligenți de la Luma Labs folosesc în schimb inteligența artificială. Aceasta face ca această tehnologie să fie compatibilă cu iPhone-uri la fel de vechi ca iPhone 11.

În viitor, aplicația va deveni disponibilă pe Android și există deja o versiune web în testare beta. Într-un interviu, CEO-ul Luma Labs, Amit Jain, a spus că aplicația pentru iPhone este de așteptat să fie gata pentru lansare publică în câteva săptămâni.

Cum se utilizează Luma AI

Pentru a folosi Luma AI, pur și simplu încerciți încet în jurul unui obiect la trei înălțimi diferite. O suprapunere AR vă ghidează prin proces, care durează câteva minute și devine mai ușor după câteva încercări, pe măsură ce vă familiarizați cu procesul. În curând, veți putea captura un obiect de dimensiuni medii precum un scaun în câteva minute.

Orice obiect de dimensiune poate fi manipulat deoarece, pentru Luma AI, este doar o serie de imagini – indiferent cât de mare este subiectul. Dacă încercuiți o ceașcă, o statuie sau o clădire, ideea generală rămâne aceeași.

Aplicația vă va anunța când are suficiente imagini, iar când se întâmplă acest lucru, va apărea un buton Finish. Puteți, de asemenea, să continuați să dați în cerc și umplerea golurilor din norul AR de inele și dreptunghiuri care reprezintă fotografiile făcute până acum. Aplicația va opri automat capturarea când a fost colectată o cantitate ideală de fotografii. Există, de asemenea, un mod de formă liberă care vă permite să faceți și mai multe fotografii, la diferite unghiuri și distanțe. Puteți vedea procesul în videoclipul YouTube pe care l-am creat mai jos. Este o aplicație pentru iPhone, deci este un videoclip portret.

Procesarea este următorul pas, care se întâmplă pe serverele Luma Labs. După aproximativ o oră, NeRF-ul terminat va fi disponibil în aplicație în mai multe forme diferite. Prima vedere oferită este un videoclip generat, care arată o trecere a obiectului în mediul său natural. Urmează o versiune interactivă și vă permite să rotiți vizualizarea trăgând un deget sau un mouse peste imagine.

Cel mai impresionant dintre toate, este disponibil și subiectul capturii, extras din fundal. Cu această reprezentare, puteți pivota obiectul 3D pe orice axă și puteți mări pentru a-l vedea mai de aproape. Claritatea depinde de câte imagini au fost colectate și de cât de lent și stabil ați fost în timpul procesului de captură.

Devenind mai bine tot timpul

Luma Labs actualizează aplicația și serviciul într-un ritm remarcabil. În decurs de o săptămână de la primirea invitației de testare beta, au fost adăugate două funcții noi puternice care extind foarte mult posibilitățile. Prima este o opțiune de încărcare web care vă permite să capturați videoclipuri fără aplicație, apoi să îl încărcați pe site-ul web Luma Labs pentru procesare. Rezultatele apar online și în aplicație.

Aceasta înseamnă că este posibil să utilizați oricare dintre modurile camerei iPhone, să capturați videoclipuri cu o cameră dedicată sau chiar să înregistrați videoclipuri cu ochelari AR, cum ar fi Ray-Ban Stories. De exemplu, un videoclip cu dronă devine și mai epic atunci când puteți fluidiza mișcarea și puteți schimba direcția după ce ați aterizat deja. Luma Labs a împărtășit un exemplu bun care arată o vedere aeriană a frunzelor de toamnă în acest tweet.

Toamna în Palo Alto este superbă! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22 octombrie 2022

Cealaltă funcție nouă deschide oportunități de editare 3D, pictare și imprimare 3D. Rețelele 3D pot fi exportate cu texturi în format OBJ sau GLTF. Ele nu sunt optimizate, dar pot fi vizualizate cu texturi intacte chiar și cu un vizualizator online, cum ar fi site-ul web gratuit, open-source Online3DViewer.

De asemenea, este posibil să deschideți fișierele 3D într-un editor de plasă, cum ar fi gratuit, open-source MeshLab pentru a șterge orice artefacte rătăcite care apar ca blob-uri plutitoare, precum și pentru a curăța și a simplifica modelul înainte de a exporta într-o varietate de formate. Figurina prezentată mai sus are aproximativ trei inci înălțime și a fost sculptată de soția mea, Tracey, pentru afacerea ei, ALittleCharacter. Luma AI a surprins o cantitate remarcabilă de detalii în sculptură și în bușteanul pe care se sprijinea. Jurnalul ar fi putut fi selectat și eliminat și de MeshLab.

Valorile maxime și minime ale scanării 3D

Kyle Brussell a împărtășit o expoziție cu deserturi de la o petrecere, menționând că le-a cerut adulților să-și aștepte bunătățile pentru a-l putea surprinde ca o dioramă digitală.

Folosit @LumaLabsAI la o petrecere de zi de naștere aseară, am făcut o grămadă de adulți să nu mănânce desert, astfel încât să pot încercui masa cu telefonul pentru a face un AI 3D să viseze la configurație ca o persoană foarte cool pic.twitter.com/sP0vVPB3yx

— Kyle Russell (@kylebrussell) 30 octombrie 2022

Deși Luma AI poate procesa videoclipuri, se bazează pe imagini statice pentru a construi o scenă tridimensională. Asta înseamnă că dacă subiectul se mișcă, s-ar putea reduce calitatea sau claritatea capturii. O imagine 3D a unei persoane care stă așezată, așa cum se arată în Tweetul lui Albert Bozesan, va fi bună. În același tweet, a doua captură a unei sculpturi arată ce se întâmplă atunci când există mișcare în cadrul scenei. Fundalul arată oameni care au mers lângă subiect ca forme distorsionate.

A luat două @LumaLabsAI#NeRF-uri pe lângă un lac bavarez astăzi. O modalitate excelentă de a captura amintiri, se simte ca Minority Report. #Tegernseepic.twitter.com/HLC0ekF7uD

— Albert Bozesan (@AlbertBozesan) 30 octombrie 2022

Prețul și disponibilitatea Luma AI

Luma AI este în prezent în testare beta, iar invitațiile sunt date periodic prin intermediul companiei Stare de nervozitate cont. Dacă aveți un iPhone compatibil și vă interesează această tehnologie, este posibil să puteți obține acces anticipat. Există, de asemenea, o listă de așteptare pe Luma Labs’ site-ul web.

CEO-ul Luma Labs, Jain, a indicat că prețul nu a fost încă determinat și depinde de cât de largă se dovedește a fi baza de utilizatori și de modul în care sunt utilizate rezultatele scanărilor. Pe baza acestor declarații, ar putea exista un abonament profesional cu funcții mai avansate și un abonament personal pentru mai puțin. Deocamdată, va rămâne liber de utilizat.

Recomandările editorilor

• Apple s-ar putea confrunta cu o penurie „severă” de iPhone 15 din cauza problemei de producție, spune raportul
• Voi fi furios dacă iPhone 15 Pro nu primește această funcție
• Am încercat să-mi înlocuiesc GoPro cu acest nou telefon și camera sa inteligentă
• Acest mic gadget vă oferă cea mai bună caracteristică a iPhone 14 pentru 149 USD
• Sper că Apple aduce această caracteristică Vision Pro pe iPhone

Îmbunătățește-ți stilul de viațăDigital Trends îi ajută pe cititori să țină cont de lumea rapidă a tehnologiei cu toate cele mai recente știri, recenzii distractive despre produse, editoriale perspicace și anticipări unice.