Egy alkalmazás segítségével hihetetlen 3D-s modelleket készítettem az iPhone-ommal

A mesterséges intelligencia képalkotásának innovációs üteme fenomenális. Az egyik cég – a Luma Labs – kiváló példát mutat a 3D-s képeken alkalmazott legújabb technológia praktikus, ugyanakkor rendkívül szórakoztató alkalmazására.

Luma AI béta tesztelés alatt áll az iPhone-on, és végül elérhető lesz a következő napon Android is. Bekerültem a béta tesztcsoportba, és megoszthatok néhány információt arról, hogy mit csinál ez a csodálatos alkalmazás, és milyen könnyű hihetetlen eredményeket elérni.

Mi az a Luma AI?

A Luma AI a Luma Labs által kifejlesztett alkalmazás és szolgáltatás. Háromdimenziós képeket készít a Neural Radiance Fields (NeRF) néven ismert technikával. Hasonló a sugárkövetési technikához, amely a csúcskategóriás játékok grafikáját olyan valósághűvé teszi.

A NeRF-ek már néhány éve léteznek, de egészen a közelmúltig elsősorban a kutatóintézetekben léteztek. A robbanással AI képgenerálás, amelynek főcíme fotorealisztikus Dall-E renderelés, a NeRF-eket sokkal szélesebb közönség kezdi felfedezni. Az új NeRF szoftverek első hulláma bizonyos fejlesztői ismereteket igényelt és szoftvercsomagok telepítése a GitHubból, majd az A.I. egy fotósorozaton. Ez egy kicsit sok volt az átlagembernek.

A Luma Labs a folyamatot drámaian egyszerűbbé teszi a Luma AI alkalmazással. Az elejétől a végéig a teljes folyamat menedzselhető iPhone-ról, és a végeredmény is elérhetőbb.

Luma AI iPhone kompatibilitás

Mivel az Apple igyekezett bemutatni a LiDAR érzékelők 3D-s mélységmérési képességeit, arra számíthat, hogy a Luma AI drágábbat igényel. iPhone 14 Pro vagy iPhone 14 Pro Max 3D modellek rögzítésére. A Luma Labs okos fejlesztői azonban helyette mesterséges intelligenciát használnak. Emiatt ez a technológia kompatibilis az iPhone 11-hez hasonló régi iPhone készülékekkel.

A jövőben az alkalmazás Androidon is elérhető lesz, és már van webes verziója is béta tesztelés alatt. A Luma Labs vezérigazgatója, Amit Jain egy interjúban elmondta, hogy az iPhone alkalmazás várhatóan néhány héten belül készen áll a nyilvános megjelenésre.

A Luma AI használata

A Luma AI használatához egyszerűen lassan körbe kell kerítenie egy objektumot három különböző magasságban. Egy AR-fedvény végigvezeti a folyamaton, amely néhány percet vesz igénybe, és néhány próbálkozás után könnyebbé válik, ahogy megismeri a folyamatot. Hamarosan néhány perc alatt megörökíthet egy közepes méretű tárgyat, például egy széket.

Bármilyen méretű objektum kezelhető, mert a Luma AI számára ez csak egy képsorozat – nem számít, mekkora a téma. Ha körbevesz egy csészét, egy szobrot vagy egy épületet, az általános elképzelés ugyanaz marad.

Az alkalmazás jelzi, ha van elég kép, és amikor ez megtörténik, megjelenik a Befejezés gomb. Folytathatod a körözést és hiánypótlás a gyűrűkből és téglalapokból álló AR felhőben amelyek az eddig készült fényképeket reprezentálják. Az alkalmazás automatikusan leállítja a rögzítést, ha az ideális mennyiségű fénykép összegyűjtése megtörtént. Van egy szabad formájú mód is, amellyel még több fényképet készíthet, különböző szögekből és távolságokból. A folyamatot az alábbi YouTube-videóban láthatja. Ez egy iPhone-alkalmazás, tehát portrévideó.

A feldolgozás a következő lépés, amely a Luma Labs szerverein történik. Körülbelül egy óra múlva a kész NeRF többféle formában is elérhető lesz az alkalmazásban. Az első nézet egy generált videó, amely az objektum elrepülését mutatja természetes környezetben. A következő egy interaktív verzió, amely lehetővé teszi, hogy a nézetet úgy pörgesse, hogy az ujját vagy az egeret a képen húzza.

A leglenyűgözőbb az egészben, hogy a háttérből kivont felvétel témája is elérhető. Ezzel az ábrázolással a 3D objektumot bármely tengelyen elforgathatja, és nagyíthatja, hogy közelebbről is lássa. Az élesség attól függ, hogy hány képet gyűjtöttek össze, és mennyire volt lassú és stabil a rögzítési folyamat során.

Egyre jobban

A Luma Labs figyelemre méltó ütemben frissíti az alkalmazást és a szolgáltatást. A bétatesztre szóló meghívó kézhezvételétől számított egy héten belül két erőteljes új funkció került hozzáadásra, amelyek jelentősen bővítik a lehetőségeket. Az első egy webes feltöltési lehetőség, amellyel az alkalmazás nélkül is rögzíthet videót, majd feldolgozás céljából feltöltheti a Luma Labs webhelyére. Az eredmények online és az alkalmazásban jelennek meg.

Ez azt jelenti, hogy az iPhone bármelyik kameramódját használhatja, videót rögzíthet egy dedikált kamerával, vagy akár videót is rögzíthet AR szemüveggel, mint például a Ray-Ban Stories. Például egy drónvideó még epikusabbá válik, ha simíthatod a mozgást és irányt változtathatsz, miután már leszálltál. A Luma Labs megosztott egy jó példát az őszi levelek légi felvételére ebben a tweetben.

Gyönyörű az ősz Palo Altóban! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 2022. október 22

A másik újdonság 3D szerkesztési, festési és 3D nyomtatási lehetőségeket nyit meg. A 3D hálók OBJ vagy GLTF formátumú textúrákkal exportálhatók. Nincsenek optimalizálva, de érintetlen textúrákkal még online megjelenítővel is megtekinthetők, például az ingyenes, nyílt forráskódú webhelyen Online3DViewer.

A 3D-s fájlok megnyithatók egy mesh-szerkesztőben is, például az ingyenes, nyílt forráskódú MeshLab a lebegő blobként megjelenő kósza műtermékek törléséhez, valamint a modell tisztításához és egyszerűsítéséhez, mielőtt különféle formátumba exportálná. A fent látható figura körülbelül három hüvelyk magas, és a feleségem, Tracey faragta a vállalkozása számára, AKis karakter. A Luma AI rendkívül sok részletet rögzített a szoborban és a rönkben, amelyen az állt. A naplót a MeshLab is kiválaszthatta és eltávolíthatta volna.

A 3D szkennelés csúcsai és mélypontjai

Kyle Brusell megosztott egy desszert bemutatót egy buliról, megemlítve, hogy megkérte a felnőtteket, hogy várjanak a finomságokra, hogy digitális diorámaként rögzíthesse.

Használt @LumaLabsAI tegnap este egy születésnapi bulin rávettem egy csomó felnőttet, hogy ne egyenek desszertet, hogy körözhessek az asztal körül a telefonommal, hogy egy 3D-s mesterséges intelligenciát álmodjak a beállításokról, mint egy nagyon menő ember. pic.twitter.com/sP0vVPB3yx

– Kyle Russell (@kylebrussell) 2022. október 30

Bár a Luma AI képes feldolgozni a videót, állóképekre támaszkodik a háromdimenziós jelenet megalkotásához. Ez azt jelenti, hogy ha a téma mozog, az ronthatja a felvétel minőségét vagy tisztaságát. Jó lesz egy 3D-s kép egy ülő személyről, ahogy az Albert Bozesan Tweetjében is látható. Ugyanebben a tweetben egy szobor második rögzítése megmutatja, mi történik, ha mozgás van a jeleneten belül. A háttérben az alany közelében sétálók torz alakzatok láthatók.

Kettőt vett @LumaLabsAI#NeRF-ek egy bajor tó mellett ma. Remek módja az emlékek rögzítésének, olyan érzés, mint a Minority Report. #Tegernseepic.twitter.com/HLC0ekF7uD

— Albert Bozesan (@AlbertBozesan) 2022. október 30

Luma AI ár és elérhetőség

A Luma AI jelenleg béta tesztelés alatt áll, és rendszeresen kapnak meghívókat a cégen keresztül Twitter fiókot. Ha kompatibilis iPhone-ja van, és érdekli ez a technológia, akkor lehet, hogy korai hozzáférést kaphat. Van egy várólista is Luma Labs weboldal.

A Luma Labs vezérigazgatója, Jain jelezte, hogy az árat még nem határozták meg, és attól függ, hogy milyen széles a felhasználói bázis, és hogyan használják fel a vizsgálatok eredményeit. Ezen kijelentések alapján előfordulhat, hogy van egy professzionális előfizetés fejlettebb funkciókkal és egy személyes előfizetés olcsóbban. Egyelőre ingyenesen használható marad.

Szerkesztői ajánlások

• A jelentés szerint az Apple „súlyos” iPhone 15-hiánnyal nézhet szembe a gyártási probléma miatt
• Dühös leszek, ha az iPhone 15 Pro nem kapja meg ezt a funkciót
• Megpróbáltam lecserélni a GoPro-mat erre az új telefonra és annak okos kamerájára
• Ez a kis kütyü az iPhone 14 legjobb funkcióját nyújtja 149 dollárért
• Remélem, az Apple elhozza ezt a Vision Pro funkciót az iPhone-ra

Frissítse életmódjátA Digital Trends segítségével az olvasók nyomon követhetik a technológia rohanó világát a legfrissebb hírekkel, szórakoztató termékismertetőkkel, éleslátó szerkesztőségekkel és egyedülálló betekintésekkel.