Pada Konferensi Pemrosesan Informasi Neural di Montreal, Kanada, peneliti Nvidia menunjukkan hal tersebut dapat menggunakan kekuatan kecerdasan buatan untuk membuat adegan sintetik namun realistis dengan detail dan tekstur. Para peneliti mengklaim bahwa pekerjaan tersebut masih dalam tahap awal, dan belum jelas kapan teknologi tersebut akan diluncurkan dirilis ke konsumen, namun ada potensi besar untuk rendering berbasis kecerdasan buatan Nvidia di pasar ruang permainan.
“Pekerjaan ini adalah tentang cara baru merender grafik komputer menggunakan jaringan saraf,” kata Wakil Presiden Pembelajaran Mendalam Terapan Nvidia Bryan Catanzaro dalam panggilan konferensi. Pada dasarnya, para peneliti ingin mengetahui bagaimana mereka dapat menerapkan A.I. untuk membuat grafik komputer menjadi lebih baik, dan solusinya adalah dengan menerapkan pembelajaran mesin pada video dunia nyata untuk merender grafik baru.
Video yang Direkomendasikan
“Kami telah membangun sebuah sistem yang mengambil representasi dunia fisik tingkat tinggi – pada dasarnya mengambil sketsa video dan mengubahnya menjadi adegan yang dirender,” kata Catanzaro. “Model ini memahami informasi tingkat tinggi dari objek di dunia nyata, dan kemudian menguraikannya untuk menambahkan informasi tekstur dan pencahayaan. Tujuannya adalah untuk dapat mensintesis adegan-adegan baru dengan grafis.”
Pembelajaran mesin digunakan untuk menganalisis video yang ada dan Nvidia akan menerapkan teknik visi komputer untuk menambahkan label ke objek dan propertinya. Ini berarti bahwa A.I. akan mampu mengenali lanskap kota perkotaan dan memahami objek apa saja yang berupa pohon, mobil, atau bangunan, misalnya.
Teknologi ini berasal dari penelitian yang sudah ada, seperti dari University of California, Berkeley, menurut Nvidia. Perusahaan ini telah memamerkan teknik rendering berbasis AI lainnya di masa lalu, termasuk salah satunya menghilangkan noise dari suatu gambar.
Para peneliti mampu mencapai rendering real-time pada GPU Tensor Core, tetapi untuk konferensi tersebut, Nvidia mendemonstrasikan teknologi tersebut pada kartu Titan V-nya. “Meskipun Anda dapat melakukan ini pada prosesor apa pun, aspek real-time memerlukan banyak A.I. throughput,” jelas Catanzaro, seraya menekankan bahwa Tensor Core GPU itu penting.
Dengan kemampuan membuat konten dan menambahkannya ke dunia virtual, pasar game dapat memperoleh manfaat besar dari pekerjaan yang diciptakan oleh penelitian ini. Pengembang, misalnya, dapat melakukan “remaster” game lama dengan merender ulang judul lama untuk menambahkan visual definisi tinggi, atau mereka dapat menambahkan level baru ke game yang sudah ada dengan sedikit usaha.
Sebagai contoh dasar cara kerjanya, pengguna dapat mengambil video diri mereka sendiri, mengunggahnya ke dalam game, dan renderingnya akan dapat membuat avatar yang sangat dipersonalisasi untuk digunakan dalam game. Nvidia saat ini telah melakukan open-source kode dari penelitiannya, namun Catanzaro memperingatkan bahwa pekerjaan awal di bidang ini lebih cocok untuk ilmuwan komputer daripada pengembang game.
Dalam demo terpisah, Nvidia menunjukkan bahwa mereka dapat menganalisis gerakan tarian — seperti dari video musik populer gaya Gangnam — dan mentransfer gerakan tersebut ke orang lain menggunakan teknik visi komputer yang sama. “Kami menganalisis kode orang tersebut, dan itu menjadi sketsa kami,” kata Catanzaro. “Dan model tersebut menampilkan orang yang menjadi target berdasarkan sketsa itu.”
Nvidia memperingatkan bahwa ini masih merupakan teknologi tahap awal, tetapi Anda juga dapat meningkatkan grafisnya game yang sudah ada dan latih model berdasarkan citra dunia nyata untuk merender ulang game lama agar terlihat lebih baik. Karena teknologi tersebut memerlukan komputer untuk menganalisis objek yang diketahui di dunia nyata, Catanzaro memperingatkan bahwa teknologi tersebut tidak akan berfungsi pada hal-hal fantastis, seperti rendering elf Sinterklas. Secara teori, akunya, Anda dapat melatih komputer untuk membuat elf, tetapi Anda perlu membuat elf fisik dan mengambil gambar agar komputer dapat mempelajarinya.
Seperti penelusuran sinar teknologi yang diperkenalkan pada seri RTX terbaru Nvidia kartu grafis bagi konsumen, perusahaan mengatakan bahwa rendering berbasis AI ini digunakan secara hybrid dan tidak dimaksudkan untuk menggantikan teknik rendering tradisional. Sebaliknya, rendering berbasis A.I. dimaksudkan untuk hidup berdampingan dan digunakan dengan mesin rendering grafis tradisional.
Saat ini, tidak jelas kapan teknologi ini akan memasuki pasar game. Catanzaro berspekulasi dengan optimis, hal ini bisa memakan waktu hanya beberapa tahun. Dikombinasikan dengan penelusuran sinar, Render adegan berbasis A.I. akan menghadirkan visual berkualitas dalam judul game yang dirender secara real time.
Rekomendasi Editor
- Saya menguji fitur RTX baru Nvidia, dan fitur ini memperbaiki bagian terburuk dari game PC
- Penulis terkenal menuntut pembayaran dari perusahaan AI untuk menggunakan karya mereka
- Wix menggunakan ChatGPT untuk membantu Anda membangun keseluruhan situs web dengan cepat
- GPU Nvidia yang misterius ini benar-benar mengerikan — dan kita baru saja melihatnya lagi
- RTX 4060 Nvidia mungkin tidak terlalu mengecewakan
Tingkatkan gaya hidup AndaTren Digital membantu pembaca mengawasi dunia teknologi yang bergerak cepat dengan semua berita terkini, ulasan produk yang menyenangkan, editorial yang berwawasan luas, dan cuplikan unik.
