Naudojau programą, kad su savo iPhone sukurčiau neįtikėtinus 3D modelius

Dirbtinio intelekto vaizdų generavimo inovacijų tempas yra fenomenalus. Viena įmonė – „Luma Labs“ – yra puikus praktiško, tačiau labai linksmo naujausių technologijų, taikomų 3D vaizdams, naudojimo pavyzdys.

Luma AI yra bandomas beta versijos iPhone ir galiausiai bus pasiekiamas Android taip pat. Patekau į beta versijos testavimo grupę ir galiu pasidalinti informacija apie tai, ką veikia ši nuostabi programa ir kaip lengva pasiekti neįtikėtinų rezultatų.

Kas yra Luma AI?

„Luma AI“ yra „Luma Labs“ sukurta programa ir paslauga. Jis fiksuoja trimačius vaizdus naudojant techniką, žinomą kaip Neural Radiance Fields (NeRF). Tai panašu į spindulių sekimo techniką, dėl kurios aukščiausios klasės žaidimų grafika atrodo tokia tikroviška.

NeRF egzistuoja jau kelerius metus, tačiau iki šiol jie daugiausia egzistavo tyrimų įstaigose. Su sprogimu AI vaizdų generavimas, sukurtas fotorealistiniais Dall-E atvaizdais, NeRF pradeda tyrinėti daug platesnė auditorija. Pirmajai naujos NeRF programinės įrangos bangai reikėjo tam tikrų kūrėjo įgūdžių ir programinės įrangos paketų diegimas iš „GitHub“., tada mokydamas A.I. ant nuotraukų rinkinio. Paprastam žmogui tai buvo šiek tiek daug.

„Luma Labs“ ketina labai supaprastinti procesą naudodama „Luma AI“ programą. Nuo pradžios iki pabaigos visą procesą galima valdyti iš „iPhone“, o galutinis rezultatas taip pat yra labiau prieinamas.

„Luma AI iPhone“ suderinamumas

Kadangi „Apple“ stengėsi pademonstruoti LiDAR jutiklių 3D gylio matavimo galimybes, galite tikėtis, kad „Luma AI“ reikės brangesnių iPhone 14 Pro arba iPhone 14 Pro Max 3D modeliams užfiksuoti. Tačiau sumanūs „Luma Labs“ kūrėjai vietoj to naudoja dirbtinį intelektą. Dėl to ši technologija suderinama su tokiais senais kaip iPhone 11.

Ateityje programa bus prieinama „Android“, o žiniatinklio versija taip pat jau yra beta versijos testavimo metu. Interviu „Luma Labs“ generalinis direktorius Amit Jain sakė, kad „iPhone“ programa bus paruošta viešai išleisti po kelių savaičių.

Kaip naudotis Luma AI

Norėdami naudoti Luma AI, tiesiog lėtai sukite aplink objektą trijuose skirtinguose aukščiuose. AR perdanga padės jums atlikti procesą, kuris trunka kelias minutes ir tampa lengvesnis po kelių bandymų, kai susipažinsite su procesu. Netrukus per kelias minutes galėsite užfiksuoti vidutinio dydžio objektą, pavyzdžiui, kėdę.

Galima tvarkyti bet kokio dydžio objektą, nes Luma AI tai tik vaizdų serija – nesvarbu, kokio dydžio objektas yra. Jei apjuosite puodelį, statulą ar pastatą, bendra idėja išlieka ta pati.

Programėlė praneš, kai joje bus pakankamai vaizdų, o kai tai atsitiks, pasirodys mygtukas Baigti. Taip pat galite nuolat suktis ratu ir užpildant AR žiedų ir stačiakampių debesies tarpus kurie atspindi iki šiol darytas nuotraukas. Programa automatiškai sustabdys fotografavimą, kai bus surinktas idealus nuotraukų kiekis. Taip pat yra laisvos formos režimas, leidžiantis užfiksuoti dar daugiau nuotraukų skirtingais kampais ir atstumais. Procesą galite pamatyti toliau pateiktame „YouTube“ vaizdo įraše. Tai „iPhone“ programa, taigi tai portretinis vaizdo įrašas.

Apdorojimas yra kitas žingsnis, kuris vyksta „Luma Labs“ serveriuose. Maždaug po valandos baigtas NeRF bus pasiekiamas programoje keliomis skirtingomis formomis. Pirmas rodomas vaizdas yra sugeneruotas vaizdo įrašas, kuriame rodomas objekto skrydis natūralioje aplinkoje. Kitas yra interaktyvi versija, kurią naudodami galite pasukti vaizdą vilkdami pirštu arba pele per vaizdą.

Įspūdingiausia yra tai, kad taip pat yra fotografavimo objektas, išgautas iš fono. Naudodami šį vaizdą galite pasukti 3D objektą ant bet kurios ašies ir priartinti, kad pamatytumėte jį iš arčiau. Ryškumas priklauso nuo to, kiek vaizdų buvo surinkta ir kiek lėtas bei stabilus buvote fotografavimo metu.

Visą laiką gerėja

„Luma Labs“ nepaprastu tempu atnaujina programą ir paslaugą. Per savaitę nuo beta versijos testavimo kvietimo buvo pridėtos dvi galingos naujos funkcijos, kurios labai išplečia galimybes. Pirmoji yra įkėlimo žiniatinklyje parinktis, leidžianti užfiksuoti vaizdo įrašą be programos, tada įkelti jį į „Luma Labs“ svetainę apdoroti. Rezultatai rodomi internete ir programėlėje.

Tai reiškia, kad galima naudoti bet kurį „iPhone“ fotoaparato režimą, fiksuoti vaizdo įrašą su tam skirta kamera ar net įrašyti vaizdo įrašą su AR akiniais, tokiais kaip „Ray-Ban Stories“. Pavyzdžiui, drono vaizdo įrašas tampa dar epiškesnis, kai jau nusileidus galite sušvelninti judesį ir pakeisti kryptį. Šiame tviteryje „Luma Labs“ pasidalino geru pavyzdžiu, rodančiu rudens lapų vaizdą iš oro.

Ruduo Palo Alte yra nuostabus! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

– Luma AI (@LumaLabsAI) 2022 m. spalio 22 d

Kita nauja funkcija atveria 3D redagavimo, dažymo ir 3D spausdinimo galimybes. 3D tinklelius galima eksportuoti su tekstūromis OBJ arba GLTF formatu. Jie nėra optimizuoti, tačiau juos galima peržiūrėti nepažeistomis tekstūromis net naudojant internetinę peržiūros priemonę, pvz., nemokamą atvirojo kodo svetainę. Online3DViewer.

Taip pat galima atidaryti 3D failus tinklelio rengyklėje, pavyzdžiui, nemokama atvirojo kodo MeshLab Norėdami ištrinti bet kokius klaidinančius artefaktus, kurie rodomi kaip slankiosios dėmės, taip pat išvalyti ir supaprastinti modelį prieš eksportuojant įvairiais formatais. Aukščiau pavaizduota figūrėlė yra maždaug trijų colių aukščio ir ją nulipdė mano žmona Tracey savo verslui, Mažas veikėjas. Luma AI užfiksavo nepaprastai daug detalių skulptūroje ir rąste, ant kurio ji stovėjo. Žurnalą taip pat galėjo pasirinkti ir pašalinti „MeshLab“.

3D nuskaitymo aukščiausios ir žemiausios savybės

Kyle'as Brusellas pasidalijo desertų demonstravimu iš vakarėlio, paminėdamas, kad paprašė suaugusiųjų palaukti skanėstų, kad galėtų jį užfiksuoti kaip skaitmeninę dioramą.

Naudota @LumaLabsAI praeitą vakarą gimtadienio vakarėlyje privertiau daugybę suaugusiųjų nevalgyti deserto, kad galėčiau apsukti stalą su telefonu, kad 3D AI svajotų apie sąranką kaip labai šaunus žmogus. pic.twitter.com/sP0vVPB3yx

- Kyle'as Russellas (@kylebrussell) 2022 m. spalio 30 d

Nors Luma AI gali apdoroti vaizdo įrašą, jis remiasi nejudančiais vaizdais, kad sukurtų trimatę sceną. Tai reiškia, kad jei objektas juda, gali pablogėti fiksavimo kokybė arba aiškumas. Sėdinčio žmogaus 3D vaizdas, kaip parodyta Alberto Bozesano „Twitter“ žinutėje, bus geras. Tame pačiame tviteryje antrasis skulptūros užfiksavimas parodo, kas nutinka, kai scenoje vyksta judėjimas. Fone rodomi žmonės, kurie vaikščiojo šalia objekto kaip iškreiptos formos.

Paėmė du @LumaLabsAI#NeRFs prie Bavarijos ežero šiandien. Puikus būdas užfiksuoti prisiminimus, atrodo kaip mažumos ataskaita. #Tegernseepic.twitter.com/HLC0ekF7uD

- Albertas Bozesanas (@AlbertBozesan) 2022 m. spalio 30 d

Luma AI kaina ir prieinamumas

Šiuo metu „Luma AI“ bando beta versiją, o kvietimai periodiškai pateikiami per įmonę Twitter sąskaitą. Jei turite suderinamą „iPhone“ ir domitės šia technologija, galbūt galėsite gauti išankstinę prieigą. Taip pat yra laukiančiųjų sąrašas „Luma Labs“ Interneto svetainė.

„Luma Labs“ generalinis direktorius Jain nurodė, kad kainos dar nenustatytos ir priklauso nuo to, kokia plati bus vartotojų bazė ir kaip naudojami nuskaitymo rezultatai. Remiantis šiais teiginiais, gali būti profesionali prenumerata su pažangesnėmis funkcijomis ir asmeninė prenumerata pigiau. Kol kas juo bus galima naudotis nemokamai.

Redaktorių rekomendacijos

• „Apple“ gali susidurti su „dideliu“ „iPhone 15“ trūkumu dėl gamybos problemos, sakoma pranešime
• Supyksiu, jei „iPhone 15 Pro“ negaus šios funkcijos
• Bandžiau pakeisti savo „GoPro“ šiuo nauju telefonu ir jo protinga kamera
• Ši maža programėlė suteikia jums geriausią „iPhone 14“ funkciją už 149 USD
• Tikiuosi, kad „Apple“ įdiegs šią „Vision Pro“ funkciją „iPhone“.

Atnaujinkite savo gyvenimo būdąSkaitmeninės tendencijos padeda skaitytojams stebėti sparčiai besivystantį technologijų pasaulį – pateikiamos visos naujausios naujienos, smagios produktų apžvalgos, įžvalgūs vedamieji leidiniai ir unikalūs žvilgsniai.