Saya menggunakan aplikasi untuk membuat model 3D yang luar biasa dengan iPhone saya

Laju inovasi dalam menghasilkan citra dengan kecerdasan buatan sangat fenomenal. Salah satu perusahaan — Luma Labs — memberikan contoh yang sangat baik tentang penggunaan teknologi terkini yang praktis namun sangat menghibur yang diterapkan pada gambar 3D.

Luma AI sedang dalam pengujian beta di iPhone dan pada akhirnya akan tersedia di Android demikian juga. Saya bergabung dalam grup pengujian beta dan dapat berbagi beberapa informasi tentang fungsi aplikasi luar biasa ini dan betapa mudahnya mendapatkan hasil yang luar biasa.

Apa itu Luma AI?

Luma AI adalah aplikasi dan layanan yang dikembangkan oleh Luma Labs. Ini menangkap gambar tiga dimensi menggunakan teknik yang dikenal sebagai Neural Radiance Fields (NeRF). Mirip dengan teknik ray-tracing yang membuat grafis di game kelas atas terlihat begitu realistis.

NeRF telah ada selama beberapa tahun, namun baru ada terutama di fasilitas penelitian hingga saat ini. Dengan ledakan Pembuatan gambar AI, dengan fitur utama rendering Dall-E yang fotorealistik, NeRF mulai dieksplorasi oleh khalayak yang lebih luas. Gelombang pertama perangkat lunak NeRF baru memerlukan beberapa keterampilan pengembang dan menginstal paket perangkat lunak dari GitHub, lalu latih A.I. pada satu set foto. Itu agak berlebihan bagi kebanyakan orang.

Luma Labs akan membuat prosesnya lebih sederhana dengan aplikasi Luma AI-nya. Dari awal hingga akhir, seluruh proses dapat dikelola dari iPhone, dan hasil akhirnya juga lebih mudah diakses.

Kompatibilitas iPhone Luma AI

Karena Apple ingin mendemonstrasikan kemampuan pengukuran kedalaman 3D dari sensor LiDAR, Anda mungkin mengira Luma AI memerlukan sensor yang lebih mahal. iPhone 14 Pro atau iPhone 14 Pro Maks untuk menangkap model 3D. Namun, pengembang pintar di Luma Labs malah menggunakan kecerdasan buatan. Itu membuat teknologi ini kompatibel dengan iPhone setua iPhone 11.

Nantinya, aplikasi ini akan tersedia di Android dan sudah ada versi web dalam pengujian beta juga. Dalam sebuah wawancara, CEO Luma Labs Amit Jain mengatakan aplikasi iPhone diharapkan siap dirilis ke publik dalam beberapa minggu.

Cara menggunakan Luma AI

Untuk menggunakan Luma AI, Anda cukup melingkari objek secara perlahan di tiga ketinggian berbeda. Hamparan AR memandu Anda melalui prosesnya, yang memakan waktu beberapa menit dan menjadi lebih mudah setelah beberapa kali mencoba saat Anda sudah terbiasa dengan prosesnya. Tak lama kemudian, Anda akan dapat menangkap objek berukuran sedang seperti kursi dalam beberapa menit.

Objek berukuran apa pun dapat ditangani karena, bagi Luma AI, itu hanyalah serangkaian gambar — tidak peduli seberapa besar subjeknya. Jika Anda melingkari cangkir, patung, atau bangunan, gambaran umumnya tetap sama.

Aplikasi ini akan memberi tahu Anda ketika gambar sudah cukup, dan ketika itu terjadi, tombol Selesai akan muncul. Anda juga bisa terus berputar-putar dan mengisi celah di awan AR berupa cincin dan persegi panjang yang mewakili foto-foto yang diambil selama ini. Aplikasi akan secara otomatis menghentikan pengambilan ketika jumlah foto telah terkumpul ideal. Ada juga mode bentuk bebas yang memungkinkan Anda mengambil lebih banyak foto, pada sudut dan jarak berbeda. Anda dapat melihat prosesnya dalam video YouTube yang saya buat di bawah ini. Ini adalah aplikasi iPhone, jadi ini adalah video potret.

Pemrosesan adalah langkah selanjutnya, yang terjadi di server Luma Labs. Setelah sekitar satu jam, NeRF yang telah selesai akan tersedia di aplikasi dalam beberapa bentuk berbeda. Tampilan pertama yang diberikan adalah video yang dihasilkan, menunjukkan objek yang melintas di lingkungan alaminya. Versi interaktif berikutnya dan memungkinkan Anda memutar tampilan dengan menyeret jari atau mouse melintasi gambar.

Yang paling mengesankan dari semuanya, subjek pengambilan gambar, yang diambil dari latar belakang, juga tersedia. Dengan representasi ini, Anda dapat memutar objek 3D pada sumbu mana pun dan memperbesarnya untuk melihatnya lebih dekat. Ketajamannya bergantung pada berapa banyak gambar yang dikumpulkan dan seberapa lambat dan stabil Anda selama proses pengambilan.

Menjadi lebih baik setiap saat

Luma Labs memperbarui aplikasi dan layanan dengan kecepatan luar biasa. Dalam waktu seminggu setelah menerima undangan pengujian beta, dua fitur baru yang canggih telah ditambahkan yang sangat memperluas kemungkinannya. Yang pertama adalah opsi unggah web yang memungkinkan Anda merekam video tanpa aplikasi, lalu mengunggahnya ke situs web Luma Labs untuk diproses. Hasilnya muncul secara online dan di aplikasi.

Artinya, Anda dapat menggunakan salah satu mode kamera iPhone, merekam video dengan kamera khusus, atau bahkan merekam video dengan kacamata AR seperti Ray-Ban Stories. Misalnya, video drone menjadi lebih epik ketika Anda dapat menghaluskan gerakan dan mengubah arah setelah Anda mendarat. Luma Labs membagikan contoh bagus yang menunjukkan pemandangan dedaunan musim gugur dari udara dalam tweet ini.

Musim gugur di Palo Alto sungguh indah! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22 Oktober 2022

Fitur baru lainnya membuka peluang pengeditan 3D, pengecatan, dan pencetakan 3D. Jerat 3D dapat diekspor dengan tekstur dalam format OBJ atau GLTF. Mereka tidak dioptimalkan tetapi dapat dilihat dengan tekstur utuh bahkan dengan penampil online seperti situs web sumber terbuka gratis Penampil 3D Online.

Dimungkinkan juga untuk membuka file 3D di editor mesh seperti sumber terbuka gratis Lab Jaring untuk menghapus artefak liar yang muncul sebagai gumpalan mengambang, serta membersihkan, dan menyederhanakan model sebelum mengekspor dalam berbagai format. Patung yang ditampilkan di atas tingginya sekitar tiga inci dan dipahat oleh istri saya, Tracey, untuk bisnisnya, Karakter Kecil. Luma AI menangkap detail yang luar biasa pada patung dan batang kayu yang menjadi sandarannya. Log juga bisa dipilih dan dihapus oleh MeshLab.

Naik turunnya pemindaian 3D

Kyle Brussell membagikan tampilan makanan penutup dari sebuah pesta, menyebutkan bahwa dia meminta orang dewasa untuk menunggu suguhan mereka sehingga dia dapat mengabadikannya sebagai diorama digital.

Digunakan @LumaLabsAI di pesta ulang tahun tadi malam, membuat sekelompok orang dewasa tidak makan makanan penutup sehingga saya bisa melingkari meja dengan ponsel saya untuk membuat mimpi AI 3D dari pengaturan seperti orang yang sangat keren pic.twitter.com/sP0vVPB3yx

— Kyle Russel (@kylebrussell) 30 Oktober 2022

Meskipun Luma AI dapat memproses video, Luma AI mengandalkan gambar diam untuk membuat pemandangan tiga dimensi. Artinya, jika subjek bergerak, kualitas atau kejelasan hasil tangkapan mungkin berkurang. Gambar 3D orang yang sedang duduk, seperti yang ditunjukkan dalam Tweet Albert Bozesan, akan bagus. Dalam tweet yang sama, cuplikan kedua dari sebuah patung menunjukkan apa yang terjadi jika ada gerakan di dalam adegan. Latar belakang menunjukkan orang-orang yang berjalan di dekat subjek dalam bentuk yang terdistorsi.

Mengambil dua @LumaLabsAI#NeRF di tepi danau Bavaria hari ini. Cara hebat untuk mengabadikan kenangan, terasa seperti Laporan Minoritas. #Tegernseepic.twitter.com/HLC0ekF7uD

— Albert Bozesan (@AlbertBozesan) 30 Oktober 2022

Harga dan ketersediaan Luma AI

Luma AI saat ini sedang dalam pengujian beta, dan undangan diberikan secara berkala melalui perusahaan Twitter akun. Jika Anda memiliki iPhone yang kompatibel dan tertarik dengan teknologi ini, Anda mungkin bisa mendapatkan akses awal. Ada juga daftar tunggu di Lab Luma situs web.

CEO Luma Labs, Jain, mengindikasikan bahwa harga belum ditentukan dan bergantung pada seberapa luas basis pengguna dan bagaimana hasil pemindaian digunakan. Berdasarkan pernyataan ini, mungkin ada langganan profesional dengan fitur lebih canggih dan langganan pribadi dengan harga lebih murah. Untuk saat ini, ini akan tetap gratis untuk digunakan.

Rekomendasi Editor

• Apple mungkin menghadapi kekurangan iPhone 15 yang ‘parah’ karena masalah produksi, kata laporan
• Saya akan marah besar jika iPhone 15 Pro tidak mendapatkan fitur yang satu ini
• Saya mencoba mengganti GoPro saya dengan ponsel baru ini dan kameranya yang pintar
• Gadget kecil ini memberi Anda fitur terbaik iPhone 14 seharga $149
• Saya berharap Apple menghadirkan fitur Vision Pro ini ke iPhone

Tingkatkan gaya hidup AndaTren Digital membantu pembaca mengawasi dunia teknologi yang bergerak cepat dengan semua berita terkini, ulasan produk yang menyenangkan, editorial yang berwawasan luas, dan cuplikan unik.