Použil som aplikáciu na vytvorenie neuveriteľných 3D modelov s mojím iPhone

Tempo inovácií pri vytváraní obrázkov umelej inteligencie je fenomenálne. Jedna spoločnosť – Luma Labs – poskytuje vynikajúci príklad praktického, no nesmierne zábavného využitia najnovšej technológie aplikovanej na 3D obrázky.

Luma AI je v beta testovaní na iPhone a nakoniec bude sprístupnený na Android tiež. Dostal som sa do testovacej skupiny beta a môžem sa podeliť o nejaké informácie o tom, čo táto úžasná aplikácia robí a aké ľahké je dosiahnuť neuveriteľné výsledky.

Čo je Luma AI?

Luma AI je aplikácia a služba vyvinutá spoločnosťou Luma Labs. Zachytáva trojrozmerné obrázky pomocou techniky známej ako Neural Radiance Fields (NeRF). Je to podobné ako technika sledovania lúčov, vďaka ktorej grafika v špičkových hrách vyzerá tak realisticky.

NeRF sú tu už niekoľko rokov, ale až donedávna existovali predovšetkým vo výskumných zariadeniach. S výbuchom Generovanie AI obrazu, na čele s fotorealistickými Dall-E rendermi, NeRF začína skúmať oveľa širšie publikum. Prvá vlna nového softvéru NeRF si vyžadovala určité vývojárske zručnosti a inštalácia softvérových balíkov z GitHub, potom školenie A.I. na súbore fotografií. Na bežného človeka to bolo trochu veľa.

Luma Labs sa chystá tento proces výrazne zjednodušiť pomocou aplikácie Luma AI. Od začiatku do konca je možné celý proces riadiť z iPhone a konečný výsledok je tiež prístupnejší.

Luma AI kompatibilita s iPhone

Keďže spoločnosť Apple predviedla možnosti 3D merania hĺbky snímačov LiDAR, môžete očakávať, že Luma AI bude vyžadovať drahšie iPhone 14 Pro alebo iPhone 14 Pro Max na snímanie 3D modelov. Šikovní vývojári z Luma Labs však namiesto toho využívajú umelú inteligenciu. Vďaka tomu je táto technológia kompatibilná s telefónmi iPhone rovnako starými ako iPhone 11.

V budúcnosti bude aplikácia dostupná pre Android a už existuje aj webová verzia v beta testovaní. V rozhovore generálny riaditeľ Luma Labs Amit Jain povedal, že aplikácia pre iPhone by mala byť pripravená na verejné vydanie v priebehu niekoľkých týždňov.

Ako používať Luma AI

Ak chcete použiť Luma AI, jednoducho pomaly krúžite okolo objektu v troch rôznych výškach. Prekrytie AR vás prevedie procesom, ktorý trvá niekoľko minút a po niekoľkých pokusoch sa zjednoduší, keď sa s procesom zoznámite. Onedlho budete môcť zachytiť stredne veľký predmet, ako je napríklad stolička, za pár minút.

S objektom akejkoľvek veľkosti je možné manipulovať, pretože pre Luma AI je to len séria obrázkov – bez ohľadu na to, aký veľký je objekt. Ak zakrúžkujete pohár, sochu alebo budovu, všeobecná myšlienka zostáva rovnaká.

Aplikácia vás upozorní, keď bude mať dostatok obrázkov, a keď sa tak stane, zobrazí sa tlačidlo Dokončiť. Môžete tiež pokračovať v krúžku a vyplnenie medzier v AR oblaku prstencov a obdĺžnikov ktoré predstavujú doteraz zhotovené fotografie. Aplikácia automaticky zastaví snímanie, keď sa nazbiera ideálne množstvo fotografií. K dispozícii je tiež režim voľného tvaru, ktorý vám umožní zachytiť ešte viac fotografií v rôznych uhloch a vzdialenostiach. Postup si môžete pozrieť vo videu YouTube, ktoré som vytvoril nižšie. Je to aplikácia pre iPhone, takže ide o video na výšku.

Spracovanie je ďalším krokom, ktorý prebieha na serveroch Luma Labs. Po približne hodine bude hotový NeRF dostupný v aplikácii v niekoľkých rôznych formách. Prvým daným pohľadom je vygenerované video zobrazujúce prelet objektu v jeho prirodzenom prostredí. Nasleduje interaktívna verzia, ktorá vám umožňuje otáčať pohľad ťahaním prsta alebo myši po obrázku.

Najpôsobivejšie zo všetkého je, že je k dispozícii aj predmet zachytenia extrahovaný z pozadia. Pomocou tejto reprezentácie môžete otáčať 3D objekt na ľubovoľnej osi a priblížiť ho, aby ste ho videli bližšie. Ostrosť závisí od počtu zozbieraných obrázkov a od toho, ako pomaly a stabilne ste boli počas procesu snímania.

Neustále sa zlepšovať

Luma Labs aktualizuje aplikáciu a službu pozoruhodným tempom. Do týždňa od prijatia pozvánky na beta test boli pridané dve nové výkonné funkcie, ktoré výrazne rozširujú možnosti. Prvou je možnosť nahrávania z webu, ktorá vám umožňuje zachytiť video bez aplikácie a potom ho nahrať na webovú stránku Luma Labs na spracovanie. Výsledky sa zobrazia online a v aplikácii.

To znamená, že je možné použiť ktorýkoľvek z režimov fotoaparátu iPhone, snímať video pomocou špeciálneho fotoaparátu alebo dokonca nahrávať video pomocou okuliarov AR, ako sú Ray-Ban Stories. Napríklad video z dronu sa stane ešte impozantnejším, keď môžete po pristátí zjemniť pohyb a zmeniť smer. Luma Labs sa v tomto tweete podelila o dobrý príklad zobrazujúci letecký pohľad na jesenné lístie.

Jeseň v Palo Alto je nádherná! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22. októbra 2022

Ďalšia nová funkcia otvára možnosti 3D úprav, maľovania a 3D tlače. 3D siete je možné exportovať s textúrami vo formáte OBJ alebo GLTF. Nie sú optimalizované, ale dajú sa prezerať s neporušenými textúrami aj v online prehliadači, ako je napríklad bezplatná webová stránka s otvoreným zdrojom. Online3DViewer.

Je tiež možné otvoriť 3D súbory v editore siete, ako je bezplatný open-source MeshLab na odstránenie všetkých zablúdených artefaktov, ktoré sa javia ako plávajúce škvrny, ako aj na vyčistenie a zjednodušenie modelu pred exportovaním do rôznych formátov. Figúrka uvedená vyššie je vysoká asi tri palce a vytesala ju moja manželka Tracey pre jej podnikanie, ALittleCharacter. Luma AI zachytila ​​pozoruhodné množstvo detailov v soche a polene, na ktorom spočívala. Protokol mohol vybrať a odstrániť aj MeshLab.

Najvyššie a najnižšie hodnoty 3D skenovania

Kyle Brussell zdieľal ukážku dezertov z večierka a spomenul, že požiadal dospelých, aby počkali na svoje dobroty, aby ich mohol zachytiť ako digitálnu diorámu.

Použité @LumaLabsAI Včera večer som na narodeninovej oslave prinútil veľa dospelých nejesť dezert, takže som mohol krúžiť po stole s telefónom, aby som 3D AI sníval o nastavení ako veľmi cool človek pic.twitter.com/sP0vVPB3yx

— Kyle Russell (@kylebrussell) 30. októbra 2022

Hoci Luma AI dokáže spracovať video, pri vytváraní trojrozmernej scény sa spolieha na statické obrázky. To znamená, že ak sa objekt pohybuje, môže to znížiť kvalitu alebo jasnosť záberu. 3D obraz sediacej osoby, ako je znázornený v Tweete Alberta Bozesana, bude dobrý. V tom istom tweete druhé zachytenie sochy ukazuje, čo sa stane, keď na scéne dôjde k pohybu. Pozadie zobrazuje ľudí, ktorí kráčali blízko objektu, ako skreslené tvary.

Vzal dve @LumaLabsAI#NeRFs dnes pri bavorskom jazere. Skvelý spôsob, ako zachytiť spomienky, vyzerá ako správa o menšinách. #Tegernseepic.twitter.com/HLC0ekF7uD

— Albert Bozesan (@AlbertBozesan) 30. októbra 2022

Cena a dostupnosť Luma AI

Luma AI je momentálne v beta testovaní a pozvánky sa pravidelne posielajú prostredníctvom spoločnosti Twitter účtu. Ak máte kompatibilný iPhone a máte záujem o túto technológiu, možno budete môcť získať prednostný prístup. Na stránke je aj poradovník Luma Labs webovej stránky.

Generálny riaditeľ Luma Labs Jain uviedol, že cena sa ešte musí určiť a závisí od toho, aká široká je používateľská základňa a ako sa využívajú výsledky skenov. Na základe týchto vyhlásení môže existovať profesionálne predplatné s pokročilejšími funkciami a osobné predplatné lacnejšie. Zatiaľ zostane voľne použiteľný.

Odporúčania redaktorov

• Apple môže čeliť „vážnemu“ nedostatku iPhonu 15 kvôli problémom s výrobou, uvádza správa
• Budem zúrivý, ak iPhone 15 Pro nedostane túto jednu funkciu
• Pokúsil som sa nahradiť GoPro týmto novým telefónom a jeho šikovným fotoaparátom
• Tento malý gadget vám ponúka najlepšiu funkciu pre iPhone 14 za 149 dolárov
• Dúfam, že Apple prinesie túto funkciu Vision Pro na iPhone

Zlepšite svoj životný štýlDigitálne trendy pomáhajú čitateľom mať prehľad o rýchlo sa rozvíjajúcom svete technológií so všetkými najnovšími správami, zábavnými recenziami produktov, užitočnými úvodníkmi a jedinečnými ukážkami.