Použil jsem aplikaci k vytvoření neuvěřitelných 3D modelů s mým iPhone

Tempo inovací v generování obrazu umělé inteligence je fenomenální. Jedna společnost – Luma Labs – poskytuje vynikající příklad praktického, a přesto nesmírně zábavného využití nejnovější technologie aplikované na 3D obrazy.

Luma AI je v beta testování na iPhone a nakonec bude zpřístupněn na Android také. Dostal jsem se do testovací skupiny beta a mohu se podělit o nějaké informace o tom, co tato úžasná aplikace dělá a jak snadné je dosáhnout neuvěřitelných výsledků.

Co je Luma AI?

Luma AI je aplikace a služba vyvinutá společností Luma Labs. Zachycuje trojrozměrné obrázky pomocí techniky známé jako Neural Radiance Fields (NeRF). Je to podobné technice sledování paprsku, díky které grafika ve špičkových hrách vypadá tak realisticky.

NeRF existují již několik let, ale až donedávna existovaly především ve výzkumných zařízeních. S výbuchem Generování obrazu pomocí umělé inteligence v čele s fotorealistickými Dall-E rendery, NeRF začíná zkoumat mnohem širší publikum. První vlna nového softwaru NeRF vyžadovala určité vývojářské dovednosti a instalace softwarových balíčků z GitHubu, poté školení A.I. na sadě fotografií. Na běžného člověka to bylo trochu moc.

Luma Labs se chystá tento proces výrazně zjednodušit pomocí aplikace Luma AI. Od začátku do konce lze celý proces spravovat z iPhone a konečný výsledek je také přístupnější.

Luma AI iPhone kompatibilita

Vzhledem k tomu, že společnost Apple předvedla možnosti 3D měření hloubky senzorů LiDAR, můžete očekávat, že Luma AI bude vyžadovat dražší iPhone 14 Pro nebo iPhone 14 Pro Max k zachycení 3D modelů. Šikovní vývojáři z Luma Labs však místo toho používají umělou inteligenci. Díky tomu je tato technologie kompatibilní s iPhony starými jako iPhone 11.

V budoucnu bude aplikace dostupná pro Android a již existuje i webová verze v beta testování. V rozhovoru generální ředitel Luma Labs Amit Jain řekl, že aplikace pro iPhone by měla být připravena k veřejnému vydání během několika týdnů.

Jak používat Luma AI

Chcete-li používat Luma AI, jednoduše kroužíte pomalu kolem objektu ve třech různých výškách. Překryvná RR vás provede procesem, který zabere několik minut a po několika pokusech se zjednoduší, jakmile se s procesem seznámíte. Zanedlouho budete schopni zachytit středně velký předmět, jako je židle, během několika minut.

Objekty jakékoli velikosti lze zpracovat, protože pro Luma AI je to jen série obrázků – bez ohledu na to, jak velký je objekt. Pokud zakroužkujete pohár, sochu nebo budovu, obecná myšlenka zůstane stejná.

Aplikace vám dá vědět, kdy bude mít dostatek obrázků, a když se tak stane, zobrazí se tlačítko Dokončit. Můžete také pokračovat v kroužení a vyplnění mezer v AR oblaku prstenců a obdélníků které představují dosud pořízené fotografie. Aplikace automaticky zastaví pořizování snímků, jakmile se nasbírá ideální množství fotografií. K dispozici je také režim volného tvaru, který vám umožní zachytit ještě více fotografií z různých úhlů a vzdáleností. Postup můžete vidět ve videu YouTube, které jsem vytvořil níže. Je to aplikace pro iPhone, takže je to video na výšku.

Zpracování je dalším krokem, ke kterému dochází na serverech Luma Labs. Zhruba po hodině bude hotový NeRF dostupný v aplikaci v několika různých formách. Prvním daným pohledem je vygenerované video, které ukazuje průlet objektu v jeho přirozeném prostředí. Další je interaktivní verze, která umožňuje otáčet pohledem tažením prstu nebo myši přes obrázek.

Nejpůsobivější ze všeho je, že je k dispozici také předmět zachycení extrahovaný z pozadí. Pomocí této reprezentace můžete otočit 3D objekt na libovolné ose a přiblížit jej, abyste si jej mohli prohlédnout blíže. Ostrost závisí na tom, kolik snímků bylo shromážděno a jak pomalý a stabilní jste byli během procesu snímání.

Neustále se zlepšovat

Luma Labs aktualizuje aplikaci a službu pozoruhodným tempem. Během týdne od obdržení pozvánky k beta testování byly přidány dvě nové výkonné funkce, které značně rozšiřují možnosti. První z nich je možnost nahrávání z webu, která vám umožní zachytit video bez aplikace a poté je nahrát na web Luma Labs ke zpracování. Výsledky se zobrazí online a v aplikaci.

To znamená, že je možné použít jakýkoli z režimů fotoaparátu iPhone, pořizovat video pomocí speciální kamery nebo dokonce nahrávat video s brýlemi pro AR, jako jsou Ray-Ban Stories. Například video z dronu se stane ještě působivějším, když můžete zjemnit pohyb a změnit směr poté, co jste již přistáli. Luma Labs v tomto tweetu sdílela dobrý příklad ukazující letecký pohled na podzimní listí.

Podzim v Palo Alto je nádherný! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22. října 2022

Další nová funkce otevírá možnosti 3D úprav, malování a 3D tisku. 3D sítě lze exportovat s texturami ve formátu OBJ nebo GLTF. Nejsou optimalizovány, ale lze je prohlížet s neporušenými texturami i pomocí online prohlížeče, jako je bezplatný web s otevřeným zdrojovým kódem. Online3DViewer.

Je také možné otevřít 3D soubory v editoru sítě, jako je bezplatný open-source MeshLab k odstranění všech zbloudilých artefaktů, které se objevují jako plovoucí bloby, a také k vyčištění a zjednodušení modelu před exportem do různých formátů. Figurka uvedená výše je asi tři palce vysoká a vyřezala ji moje žena Tracey pro její podnikání, ALittleCharacter. Luma AI zachytila ​​pozoruhodné množství detailů v soše a kládě, na které spočívala. Protokol mohl vybrat a odstranit také MeshLab.

Výhody a nevýhody 3D skenování

Kyle Brussell sdílel ukázku dezertů z večírku a zmínil, že požádal dospělé, aby počkali na své dobroty, aby je mohl zachytit jako digitální dioráma.

Použitý @LumaLabsAI Včera večer jsem na narozeninové oslavě přinutil spoustu dospělých nejíst dezert, takže jsem mohl kroužit kolem stolu svým telefonem a snít o nastavení 3D AI jako velmi cool člověk pic.twitter.com/sP0vVPB3yx

— Kyle Russell (@kylebrussell) 30. října 2022

Přestože Luma AI dokáže zpracovat video, při vytváření trojrozměrné scény se spoléhá na statické snímky. To znamená, že pokud se objekt pohybuje, může to snížit kvalitu nebo jasnost zachycení. 3D obraz sedící osoby, jak je znázorněno v tweetu Alberta Bozesana, bude dobrý. Ve stejném tweetu ukazuje druhé zachycení sochy, co se stane, když dojde na scéně k pohybu. Pozadí zobrazuje lidi, kteří šli blízko objektu, jako zdeformované tvary.

Vzal dva @LumaLabsAI#NeRF u dnešního bavorského jezera. Skvělý způsob, jak zachytit vzpomínky, vypadá jako Minority Report. #Tegernseepic.twitter.com/HLC0ekF7uD

— Albert Bozesan (@AlbertBozesan) 30. října 2022

Cena a dostupnost Luma AI

Luma AI je v současné době ve fázi beta testování a pozvánky jsou pravidelně poskytovány prostřednictvím společnosti Cvrlikání účet. Pokud máte kompatibilní iPhone a zajímáte se o tuto technologii, možná budete moci získat předběžný přístup. Na stránce je také čekací listina Luma Labs webová stránka.

Generální ředitel Luma Labs Jain uvedl, že cena ještě nebyla stanovena a závisí na tom, jak široká je uživatelská základna a jak jsou výsledky skenování využívány. Na základě těchto prohlášení může existovat profesionální předplatné s pokročilejšími funkcemi a osobní předplatné za nižší cenu. Prozatím zůstane zdarma k použití.

Doporučení redakce

• Apple může čelit „vážnému“ nedostatku iPhonu 15 kvůli výrobnímu problému, uvádí zpráva
• Budu zuřit, pokud iPhone 15 Pro tuto jednu funkci nedostane
• Pokusil jsem se nahradit GoPro tímto novým telefonem a jeho chytrým fotoaparátem
• Tento malý gadget vám poskytuje nejlepší funkci iPhone 14 za 149 $
• Doufám, že Apple přinese tuto funkci Vision Pro na iPhone

Upgradujte svůj životní stylDigitální trendy pomáhají čtenářům mít přehled o rychle se měnícím světě technologií se všemi nejnovějšími zprávami, zábavnými recenzemi produktů, zasvěcenými úvodníky a jedinečnými náhledy.