Kasutasin rakendust, et luua oma iPhone'iga uskumatuid 3D-mudeleid

Tehisintellekti piltide genereerimise innovatsioonitempo on fenomenaalne. Üks ettevõte – Luma Labs – on suurepärane näide 3D-piltide jaoks rakendatud uusima tehnoloogia praktilisest, kuid väga meelelahutuslikust kasutamisest.

Luma AI on iPhone'is beetatestimisel ja lõpuks tehakse see kättesaadavaks Android samuti. Sattusin beetatesti rühma ja saan jagada teavet selle suurepärase rakenduse toimimise ja uskumatute tulemuste saavutamise kohta.

Mis on Luma AI?

Luma AI on rakendus ja teenus, mille on välja töötanud Luma Labs. See jäädvustab kolmemõõtmelisi pilte, kasutades tehnikat, mida tuntakse närvikiirguse väljadena (NeRF). See sarnaneb kiirte jälgimise tehnikaga, mis muudab tipptasemel mängude graafika nii realistlikuks.

NeRF-id on olnud olemas juba paar aastat, kuid need on kuni viimase ajani eksisteerinud peamiselt uurimisasutustes. Koos plahvatusega Tehisintellekti piltide genereerimine, mille pealkirjaks on fotorealistlikud Dall-E renderingud, on NeRF-e hakanud uurima palju laiem publik. Uue NeRF-tarkvara esimene laine nõudis mõningaid arendajaoskusi ja tarkvarapakettide installimine GitHubist, seejärel treenides A.I. fotode komplektil. Tavainimese jaoks oli seda natuke palju.

Luma Labs muudab protsessi oma Luma AI rakendusega oluliselt lihtsamaks. Algusest lõpuni saab kogu protsessi iPhone'ist hallata ning lõpptulemus on samuti paremini ligipääsetav.

Luma AI iPhone'i ühilduvus

Kuna Apple püüdis demonstreerida LiDAR-andurite 3D sügavuse mõõtmise võimalusi, võite eeldada, et Luma AI nõuab kallimat iPhone 14 Pro või iPhone 14 Pro Max 3D-mudelite jäädvustamiseks. Luma Labsi nutikad arendajad kasutavad aga hoopis tehisintellekti. See muudab selle tehnoloogia ühilduvaks iPhone'idega, mis on sama vanad kui iPhone 11.

Tulevikus on rakendus saadaval Androidis ja beetatestimisel on juba olemas ka veebiversioon. Intervjuus ütles Luma Labsi tegevjuht Amit Jain, et iPhone'i rakendus on avalikuks avaldamiseks valmis mõne nädala pärast.

Kuidas Luma AI-d kasutada

Luma AI kasutamiseks tiirutate lihtsalt aeglaselt ümber kolme erineva kõrgusega objekti. AR-ülekate juhatab teid läbi protsessi, mis võtab mõne minuti ja muutub lihtsamaks pärast mõnda katset, kui protsessiga tutvute. Varsti saate mõne minutiga jäädvustada keskmise suurusega objekti, näiteks tooli.

Käsitseda saab mis tahes suurusega objekti, sest Luma AI jaoks on see vaid piltide seeria – olenemata sellest, kui suur objekt on. Kui teete ringi ümber tassi, kuju või hoone, jääb üldidee samaks.

Rakendus annab teile teada, kui sellel on piisavalt pilte, ja kui see juhtub, kuvatakse nupp Lõpeta. Võid ka edasi tiirutada ja rõngaste ja ristkülikute AR-pilve lünkade täitmine mis esindavad seni tehtud fotosid. Rakendus peatab pildistamise automaatselt, kui ideaalne kogus fotosid on kogutud. Samuti on olemas vabakujuline režiim, mis võimaldab jäädvustada veelgi rohkem fotosid erinevate nurkade ja vahemaadega. Protsessi näete allpool minu loodud YouTube'i videos. See on iPhone'i rakendus, seega on see portreevideo.

Töötlemine on järgmine samm, mis toimub Luma Labsi serverites. Umbes tunni pärast on valmis NeRF rakenduses saadaval mitmel erineval kujul. Esimene vaade on genereeritud video, mis näitab objektist möödalendu selle loomulikus keskkonnas. Järgmine on interaktiivne versioon, mis võimaldab vaadet keerutada, lohistades sõrme või hiirega üle pildi.

Kõige muljetavaldavam on see, et saadaval on ka taustast eraldatud jäädvustamise teema. Selle esituse abil saate pöörata 3D-objekti mis tahes teljel ja suumida, et seda lähemalt näha. Teravus sõltub sellest, kui palju pilte koguti ning kui aeglane ja stabiilne te jäädvustamisprotsessi ajal olite.

Kogu aeg paremaks

Luma Labs värskendab rakendust ja teenust märkimisväärse kiirusega. Nädala jooksul pärast beetatesti kutse saamist lisati kaks võimsat uut funktsiooni, mis laiendavad võimalusi oluliselt. Esimene on veebi üleslaadimise võimalus, mis võimaldab teil jäädvustada videot ilma rakenduseta ja seejärel laadida see töötlemiseks Luma Labsi veebisaidile. Tulemused kuvatakse veebis ja rakenduses.

See tähendab, et on võimalik kasutada kõiki iPhone'i kaamerarežiime, jäädvustada videot spetsiaalse kaameraga või isegi salvestada videot AR-prillidega, näiteks Ray-Ban Stories. Näiteks muutub droonivideo veelgi eepilisemaks, kui saate pärast maandumist liikumist sujuvamaks muuta ja suunda muuta. Luma Labs jagas selles säutsis head näidet sügislehtede õhuvaatest.

Sügis Palo Altos on imeilus! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22. oktoober 2022

Teine uus funktsioon avab 3D-redigeerimise, maalimise ja 3D-printimise võimalused. 3D-võrke saab eksportida OBJ- või GLTF-vormingus tekstuuridega. Need ei ole optimeeritud, kuid neid saab vaadata tervete tekstuuridega isegi veebivaaturiga, näiteks tasuta avatud lähtekoodiga veebisaidil Online3DViewer.

3D-faile on võimalik avada ka võrguredaktoris, näiteks tasuta avatud lähtekoodiga MeshLab kustutada kõik hulkuvad artefaktid, mis ilmuvad hõljuvate plekidena, ning puhastada ja lihtsustada mudelit enne mitmes vormingus eksportimist. Ülaltoodud kujuke on umbes kolm tolli pikk ja selle kujundas mu naine Tracey oma äri jaoks, AVäike tegelane. Luma AI jäädvustas skulptuuris ja palgis, millel see toetus, märkimisväärselt palju detaile. Logi oleks võinud valida ja eemaldada ka MeshLab.

3D-skannimise kõrged ja mõõnad

Kyle Brusell jagas peo magustoidu väljapanekut, mainides, et palus täiskasvanutel oma maiuspalasid oodata, et ta saaks selle digitaalse dioraamana jäädvustada.

Kasutatud @LumaLabsAI eile õhtul sünnipäevapeol panin hunniku täiskasvanuid magustoitu mitte sööma, et saaksin telefoniga laua ümber tiirutada, et 3D AI-st unistada nagu väga lahe inimene pic.twitter.com/sP0vVPB3yx

- Kyle Russell (@kylebrussell) 30. oktoober 2022

Kuigi Luma AI suudab videot töödelda, tugineb see kolmemõõtmelise stseeni koostamisel piltidele. See tähendab, et kui objekt liigub, võib see vähendada jäädvustamise kvaliteeti või selgust. Istuva inimese 3D-kujutis, nagu on näidatud Albert Bozesani säutsus, on hea. Samas säutsus näitab skulptuuri teine ​​jäädvustamine, mis juhtub, kui stseenis toimub liikumine. Taustal on inimesed, kes kõndisid objekti lähedal, moonutatud kujunditena.

Võttis kaks @LumaLabsAI#NeRFid täna Baieri järve ääres. Suurepärane viis mälestuste jäädvustamiseks, tundub nagu Minority Report. #Tegernseepic.twitter.com/HLC0ekF7uD

— Albert Bozesan (@AlbertBozesan) 30. oktoober 2022

Luma AI hind ja saadavus

Luma AI on praegu beetatestimisel ja kutsed saadetakse perioodiliselt ettevõtte kaudu Twitter konto. Kui teil on ühilduv iPhone ja tunnete selle tehnoloogia vastu huvi, võite saada varajase juurdepääsu. Seal on ka ootenimekiri Luma Labs veebisait.

Luma Labsi tegevjuht Jain märkis, et hinnakujundust ei ole veel kindlaks määratud ja see sõltub sellest, kui laiaks kasutajaskond osutub ja kuidas skaneerimise tulemusi kasutatakse. Nende väidete põhjal võib olla professionaalsemate funktsioonidega tellimus ja isiklik tellimus odavamalt. Esialgu jääb see tasuta kasutamiseks.

Toimetajate soovitused

• Aruandes öeldakse, et Apple võib tootmisprobleemi tõttu seista silmitsi "tõsise" iPhone 15 puudusega
• Olen raevukas, kui iPhone 15 Pro ei saa seda funktsiooni
• Proovisin oma GoPro asendada selle uue telefoni ja selle nutika kaameraga
• See väike vidin annab teile iPhone 14 parima funktsiooni 149 dollari eest
• Loodan, et Apple toob selle Vision Pro funktsiooni iPhone'i

Uuenda oma elustiiliDigitaalsed suundumused aitavad lugejatel hoida silma peal kiirel tehnikamaailmal kõigi viimaste uudiste, lõbusate tooteülevaadete, sisukate juhtkirjade ja ainulaadsete lühiülevaadetega.