Koristio sam aplikaciju za stvaranje nevjerojatnih 3D modela sa svojim iPhoneom

Brzina inovacija u stvaranju slika umjetnom inteligencijom je fenomenalna. Jedna tvrtka — Luma Labs — pruža izvrstan primjer praktične, ali vrlo zabavne upotrebe najnovije tehnologije primijenjene na 3D slike.

Luma AI je u beta testiranju na iPhoneu i na kraju će biti dostupan na Android također. Ušao sam u skupinu za beta testiranje i mogu podijeliti neke informacije o tome što ova nevjerojatna aplikacija radi i koliko je lako postići nevjerojatne rezultate.

Što je Luma AI?

Luma AI je aplikacija i usluga koju je razvio Luma Labs. Snima trodimenzionalne slike pomoću tehnike poznate kao Neural Radiance Fields (NeRF). Slično je tehnici praćenja zraka koja čini da grafika u vrhunskim igrama izgleda tako realistično.

NeRF-ovi postoje već nekoliko godina, ali su do nedavno postojali prvenstveno u istraživačkim ustanovama. Uz eksploziju AI generiranje slika, na čelu s fotorealističnim Dall-E prikazima, NeRF-ove počinje istraživati ​​mnogo šira publika. Prvi val novog NeRF softvera zahtijevao je određene vještine programera i instaliranje programskih paketa s GitHuba, zatim obuka A.I. na setu fotografija. Bilo je to malo za prosječnu osobu.

Luma Labs sprema se dramatično pojednostaviti proces sa svojom aplikacijom Luma AI. Od početka do kraja, cijelim procesom se može upravljati s iPhonea, a krajnji rezultat je također pristupačniji.

Luma AI iPhone kompatibilnost

Budući da je Apple nastojao demonstrirati mogućnosti 3D mjerenja dubine LiDAR senzora, mogli biste očekivati ​​da će Luma AI zahtijevati skuplje iPhone 14 Pro ili iPhone 14 Pro Max za snimanje 3D modela. Međutim, pametni programeri u Luma Labsu umjesto toga koriste umjetnu inteligenciju. To ovu tehnologiju čini kompatibilnom s iPhoneima starim poput iPhonea 11.

U budućnosti će aplikacija postati dostupna na Androidu, a već postoji i web verzija u beta testiranju. U intervjuu, izvršni direktor Luma Labsa Amit Jain rekao je da se očekuje da će aplikacija za iPhone biti spremna za javnu objavu za nekoliko tjedana.

Kako koristiti Luma AI

Da biste koristili Luma AI, jednostavno polako kružite oko objekta na tri različite visine. AR sloj vas vodi kroz proces koji traje nekoliko minuta i postaje lakši nakon nekoliko pokušaja kako se upoznate s procesom. Ubrzo ćete moći snimiti objekt srednje veličine poput stolca za nekoliko minuta.

Objektima bilo koje veličine može se rukovati jer je za Luma AI to samo niz slika — bez obzira koliko velik je subjekt. Ako zaokružite šalicu, kip ili zgradu, opća ideja ostaje ista.

Aplikacija će vas obavijestiti kada bude imala dovoljno slika, a kada se to dogodi pojavit će se gumb Završi. Također možete nastaviti kružiti i popunjavanje praznina u AR oblaku prstenova i pravokutnika koji predstavljaju do sada snimljene fotografije. Aplikacija će automatski zaustaviti snimanje kada se prikupi idealna količina fotografija. Tu je i način slobodnog oblika koji vam omogućuje snimanje još više fotografija, pod različitim kutovima i udaljenostima. Možete vidjeti proces u YouTube videu koji sam izradio u nastavku. To je aplikacija za iPhone, tako da je to portretni video.

Obrada je sljedeći korak, koji se događa na poslužiteljima Luma Labsa. Nakon otprilike sat vremena, gotovi NeRF bit će dostupan u aplikaciji u nekoliko različitih oblika. Prvi dani pogled je generirani video koji prikazuje prelet objekta u njegovom prirodnom okruženju. Sljedeća je interaktivna verzija koja vam omogućuje vrtenje prikaza povlačenjem prsta ili miša preko slike.

Što je najimpresivnije od svega, dostupan je i predmet snimanja, izvučen iz pozadine. Pomoću ovog prikaza možete okrenuti 3D objekt oko bilo koje osi i povećati ga da biste ga vidjeli izbliza. Oštrina ovisi o tome koliko je slika prikupljeno i koliko ste bili spori i stabilni tijekom procesa snimanja.

Sve bolje

Luma Labs ažurira aplikaciju i uslugu nevjerojatnom brzinom. U roku od tjedan dana od primitka pozivnice za beta testiranje, dodane su dvije moćne nove značajke koje uvelike proširuju mogućnosti. Prva je opcija prijenosa na web koja vam omogućuje snimanje videozapisa bez aplikacije, a zatim ga postavite na web mjesto Luma Labs za obradu. Rezultati se pojavljuju online i u aplikaciji.

To znači da je moguće koristiti bilo koji način rada kamere na iPhoneu, snimati video posebnom kamerom ili čak snimati video s AR naočalama poput Ray-Ban Stories. Na primjer, video snimak dronom postaje još epskiji kada možete ugladiti kretanje i promijeniti smjer nakon što ste već sletjeli. Luma Labs podijelio je dobar primjer koji prikazuje pogled iz zraka na jesensko lišće u ovom tweetu.

Jesen u Palo Altu je prekrasna! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22. listopada 2022

Druga nova značajka otvara mogućnosti 3D uređivanja, slikanja i 3D ispisa. 3D mreže mogu se izvesti s teksturama u OBJ ili GLTF formatu. Nisu optimizirani, ali se mogu pregledavati s netaknutim teksturama čak i s mrežnim preglednikom kao što je besplatno web mjesto otvorenog koda Online3DViewer.

Također je moguće otvoriti 3D datoteke u mesh editoru kao što je besplatni, open-source MeshLab za brisanje svih zalutalih artefakata koji se pojavljuju kao plutajuće mrlje, kao i za čišćenje i pojednostavljenje modela prije izvoza u različite formate. Gornja figurica visoka je oko tri inča, a izradila ju je moja žena, Tracey, za svoj posao, ALittleCharacter. Luma AI uhvatio je nevjerojatnu količinu detalja u skulpturi i balvanu na kojem je počivala. Dnevnik je također mogao odabrati i ukloniti MeshLab.

Usponi i nedostaci 3D skeniranja

Kyle Brussell podijelio je izlog deserta s zabave, spomenuvši kako je zamolio odrasle da pričekaju svoje poslastice kako bi to mogao snimiti kao digitalnu dioramu.

korišteno @LumaLabsAI na rođendanskoj zabavi sinoć, natjerao sam hrpu odraslih da ne jedu desert kako bih mogao kružiti oko stola sa svojim telefonom kako bi 3D AI sanjao postavu kao vrlo cool osoba pic.twitter.com/sP0vVPB3yx

— Kyle Russell (@kylebrussell) 30. listopada 2022

Iako Luma AI može obraditi video, oslanja se na fotografije za izradu trodimenzionalne scene. To znači da ako se subjekt pomiče, to može smanjiti kvalitetu ili jasnoću snimanja. 3D slika osobe koja sjedi, kao što je prikazano u Tweetu Alberta Bozesana, bit će dobra. U istom tvitu, druga snimka skulpture pokazuje što se događa kada postoji kretanje unutar scene. Pozadina prikazuje ljude koji su hodali blizu subjekta kao iskrivljene oblike.

Uzeo dva @LumaLabsAI#NeRFs danas uz bavarsko jezero. Sjajan način za bilježenje uspomena, djeluje kao Minority Report. #Tegernseepic.twitter.com/HLC0ekF7uD

— Albert Bozesan (@AlbertBozesan) 30. listopada 2022

Luma AI cijena i dostupnost

Luma AI trenutno je u beta testiranju, a pozivnice se povremeno daju putem tvrtke Cvrkut račun. Ako imate kompatibilni iPhone i zainteresirani ste za ovu tehnologiju, možda ćete moći dobiti rani pristup. Postoji i lista čekanja na Luma Labs' web stranica.

Izvršni direktor Luma Labsa Jain naznačio je da cijene tek treba odrediti i da ovise o tome koliko je široka baza korisnika i kako se koriste rezultati skeniranja. Na temelju ovih izjava, možda postoji profesionalna pretplata s naprednijim značajkama i osobna pretplata za manje. Za sada će ostati besplatan za korištenje.

Preporuke urednika

• Apple bi se mogao suočiti s 'ozbiljnim' nedostatkom iPhonea 15 zbog problema s proizvodnjom, stoji u izvješću
• Bit ću bijesan ako iPhone 15 Pro ne dobije ovu jednu značajku
• Pokušao sam zamijeniti svoj GoPro ovim novim telefonom i njegovom pametnom kamerom
• Ovaj mali gadget daje vam najbolju značajku iPhonea 14 za 149 USD
• Nadam se da će Apple donijeti ovu značajku Vision Pro na iPhone

Nadogradite svoj životni stilDigitalni trendovi pomažu čitateljima da prate brzi svijet tehnologije sa svim najnovijim vijestima, zabavnim recenzijama proizvoda, pronicljivim uvodnicima i jedinstvenim brzim pregledima.