Käytin sovellusta luodakseni uskomattomia 3D-malleja iPhonellani

Innovaatiovauhti tekoälykuvan luomisessa on ilmiömäinen. Yksi yritys – Luma Labs – tarjoaa erinomaisen esimerkin käytännöllisestä, mutta kuitenkin erittäin viihdyttävästä uusimman 3D-kuvien teknologian käytöstä.

Luma AI on beta-testauksessa iPhonessa ja tulee lopulta saataville Android yhtä hyvin. Pääsin betatestausryhmään ja voin jakaa tietoja siitä, mitä tämä hämmästyttävä sovellus tekee ja kuinka helppoa on saada uskomattomia tuloksia.

Mikä on Luma AI?

Luma AI on Luma Labsin kehittämä sovellus ja palvelu. Se ottaa kolmiulotteisia kuvia käyttämällä tekniikkaa, joka tunnetaan nimellä Neural Radiance Fields (NeRF). Se on samanlainen kuin säteenseurantatekniikka, jonka ansiosta huippuluokan pelien grafiikka näyttää niin realistiselta.

NeRF: t ovat olleet olemassa muutaman vuoden ajan, mutta ne ovat olleet pääasiassa tutkimuslaitoksissa aivan viime aikoihin asti. Räjähdyksen kanssa Tekoälykuvan luominen, jonka otsikkona ovat fotorealistiset Dall-E-renderöinnit, NeRF: itä alkaa tutkia paljon laajempi yleisö. Uusien NeRF-ohjelmistojen ensimmäinen aalto vaati joitain kehittäjätaitoja ja ohjelmistopakettien asentaminen GitHubista, sitten kouluttaa A.I. valokuvasarjassa. Se oli vähän paljon keskimääräiselle ihmiselle.

Luma Labs on tekemässä prosessista dramaattisesti yksinkertaisempaa Luma AI -sovelluksellaan. Alusta loppuun koko prosessia voidaan hallita iPhonesta, ja lopputulos on myös helpommin saavutettavissa.

Luma AI iPhone -yhteensopivuus

Koska Apple halusi esitellä LiDAR-antureiden 3D-syvyyden mittausominaisuudet, saatat odottaa Luma AI: n vaativan kalliimpaa iPhone 14 Pro tai iPhone 14 Pro Max 3D-mallien kuvaamiseen. Luma Labsin älykkäät kehittäjät käyttävät sen sijaan tekoälyä. Tämä tekee tästä tekniikasta yhteensopivan iPhone 11:n kaltaisten vanhojen iPhone-puhelimien kanssa.

Tulevaisuudessa sovellus tulee saataville Androidille, ja siitä on jo verkkoversio myös betatestauksessa. Luma Labsin toimitusjohtaja Amit Jain sanoi haastattelussa, että iPhone-sovelluksen odotetaan olevan valmis julkiseen julkaisuun muutaman viikon sisällä.

Kuinka käyttää Luma AI: tä

Käyttääksesi Luma AI: ta, sinun tarvitsee vain kiertää hitaasti kohteen ympärillä kolmella eri korkeudella. AR-peittokuva opastaa sinut prosessin läpi, joka kestää muutaman minuutin ja helpottuu muutaman yrityksen jälkeen, kun tutustut prosessiin. Ennen pitkää pystyt vangitsemaan keskikokoisen esineen, kuten tuolin, muutamassa minuutissa.

Minkä tahansa kokoisia esineitä voidaan käsitellä, koska Luma AI: lle se on vain sarja kuvia – riippumatta siitä, kuinka suuri kohde on. Jos ympyrät kupin, patsaan tai rakennuksen, yleisidea pysyy samana.

Sovellus ilmoittaa, kun siinä on tarpeeksi kuvia, ja kun niin tapahtuu, näkyviin tulee Valmis-painike. Voit myös jatkaa kiertämistä ja renkaiden ja suorakulmioiden AR-pilven aukkojen täyttäminen jotka edustavat tähän mennessä otettuja valokuvia. Sovellus lopettaa kaappauksen automaattisesti, kun ihanteellinen määrä kuvia on kerätty. Mukana on myös vapaamuotoinen tila, jonka avulla voit ottaa entistä enemmän valokuvia eri kulmista ja etäisyyksistä. Voit nähdä prosessin alla luomassani YouTube-videossa. Se on iPhone-sovellus, joten se on muotokuvavideo.

Käsittely on seuraava vaihe, joka tapahtuu Luma Labsin palvelimilla. Noin tunnin kuluttua valmis NeRF on saatavilla sovelluksessa useissa eri muodoissa. Ensimmäinen näkymä on generoitu video, joka näyttää kohteen ohilentoa sen luonnollisessa ympäristössä. Seuraavana on interaktiivinen versio, jonka avulla voit pyörittää näkymää vetämällä sormea ​​tai hiirtä kuvan poikki.

Kaikkein vaikuttavin, taustasta poimittu kaappauksen aihe on myös saatavilla. Tämän esityksen avulla voit kääntää 3D-objektia millä tahansa akselilla ja zoomata nähdäksesi sen tarkemmin. Terävyys riippuu siitä, kuinka monta kuvaa kerättiin ja kuinka hidas ja vakaa olit kuvausprosessin aikana.

Paranee koko ajan

Luma Labs päivittää sovellusta ja palvelua huimaa vauhtia. Viikon sisällä betatestauskutsun vastaanottamisesta lisättiin kaksi tehokasta uutta ominaisuutta, jotka laajentavat mahdollisuuksia huomattavasti. Ensimmäinen on verkkolatausvaihtoehto, jonka avulla voit kaapata videota ilman sovellusta ja ladata sen sitten Luma Labsin verkkosivustolle käsittelyä varten. Tulokset näkyvät verkossa ja sovelluksessa.

Tämä tarkoittaa, että on mahdollista käyttää mitä tahansa iPhonen kameratiloja, kaapata videota erillisellä kameralla tai jopa tallentaa videota AR-laseilla, kuten Ray-Ban Storiesilla. Esimerkiksi drone-videosta tulee vieläkin eeppisempää, kun voit tasoittaa liikettä ja muuttaa suuntaa jo laskeutumisen jälkeen. Luma Labs jakoi tässä twiitissä hyvän esimerkin ilmakuvasta syksyn lehdistä.

Palo Alton syksy on upea! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22. lokakuuta 2022

Toinen uusi ominaisuus avaa 3D-muokkaus-, maalaus- ja 3D-tulostusmahdollisuudet. 3D-verkot voidaan viedä tekstuurien kanssa OBJ- tai GLTF-muodossa. Niitä ei ole optimoitu, mutta niitä voidaan tarkastella pintakuvioiden ollessa ehjinä jopa online-katseluohjelmalla, kuten ilmaisella avoimen lähdekoodin verkkosivustolla. Online3DViewer.

On myös mahdollista avata 3D-tiedostoja mesh-editorissa, kuten ilmaisessa avoimessa lähdekoodissa MeshLab poistaaksesi kaikki kelluvina blobeina näkyvät hajamieliset artefaktit sekä puhdistaa ja yksinkertaistaa mallia ennen vientiä eri muodoissa. Yllä oleva hahmo on noin kolme tuumaa korkea, ja sen veisti vaimoni Tracey liiketoimintaansa varten, Pieni hahmo. Luma AI vangitsi huomattavan määrän yksityiskohtia veistoksessa ja tukissa, jonka päällä se lepäsi. Myös MeshLab olisi voinut valita ja poistaa lokin.

3D-skannauksen ylä- ja alamäet

Kyle Brussell jakoi jälkiruokanäytöksen juhlista ja mainitsi pyytäneensä aikuisia odottamaan herkkujaan, jotta hän voisi tallentaa sen digitaaliseksi dioraamaksi.

Käytetty @LumaLabsAI eilen illalla pidetyssä syntymäpäiväjuhlissa laitoin joukon aikuisia olemaan syömättä jälkiruokaa, jotta voisin kiertää pöytää puhelimellani tehdäkseni 3D-AI unelma asetuksista kuin erittäin siisti ihminen pic.twitter.com/sP0vVPB3yx

- Kyle Russell (@kylebrussell) 30. lokakuuta 2022

Vaikka Luma AI pystyy käsittelemään videota, se luo kolmiulotteisen kohtauksen still-kuviin. Tämä tarkoittaa, että jos kohde liikkuu, se saattaa heikentää kuvan laatua tai selkeyttä. 3D-kuva istuvasta henkilöstä, kuten Albert Bozesanin twiitissä näkyy, on hyvä. Samassa twiitissä veistoksen toinen otos näyttää, mitä tapahtuu, kun kohtauksessa tapahtuu liikettä. Taustalla ihmiset, jotka kävelivät kohteen lähellä vääristyneinä muotoina.

Kesti kaksi @LumaLabsAI#NeRF: t Baijerin järven rannalla tänään. Loistava tapa vangita muistoja, tuntuu Minority Reportilta. #Tegernseepic.twitter.com/HLC0ekF7uD

- Albert Bozesan (@AlbertBozesan) 30. lokakuuta 2022

Luma AI hinta ja saatavuus

Luma AI on tällä hetkellä betatestauksessa, ja kutsuja lähetetään säännöllisesti yrityksen kautta Viserrys tili. Jos sinulla on yhteensopiva iPhone ja olet kiinnostunut tästä tekniikasta, saatat saada aikaisen käyttöoikeuden. Sivulla on myös jonotuslista Luma Labs verkkosivusto.

Luma Labsin toimitusjohtaja Jain ilmoitti, että hinnoittelua ei ole vielä päätetty ja se riippuu siitä, kuinka laajaksi käyttäjäkunta muodostuu ja miten skannausten tuloksia käytetään. Näiden lausuntojen perusteella voi olla ammattitilaus, jossa on edistyneemmät ominaisuudet, ja henkilökohtainen tilaus halvemmalla. Toistaiseksi se on vapaasti käytettävissä.

Toimittajien suositukset

• Raportin mukaan Apple voi kohdata "vakavan" iPhone 15 -pulan tuotantoongelman vuoksi
• Olen raivoissani, jos iPhone 15 Pro ei saa tätä yhtä ominaisuutta
• Yritin vaihtaa GoProni tähän uuteen puhelimeen ja sen älykkääseen kameraan
• Tämä pieni vempain tarjoaa sinulle iPhone 14:n parhaan ominaisuuden hintaan 149 dollaria
• Toivon, että Apple tuo tämän Vision Pro -ominaisuuden iPhoneen

Päivitä elämäntapasiDigital Trends auttaa lukijoita pysymään tekniikan nopeatempoisessa maailmassa uusimpien uutisten, hauskojen tuotearvostelujen, oivaltavien toimitusten ja ainutlaatuisten kurkistusten avulla.