L'intelligenza artificiale di Nvidia e Ray Tracing realizza video selfie Moonwalk sulla Luna

Oltre a lanciare 10 nuovi laptop RTX Studio destinati ai creatori durante SIGGRAPH, Nvidia ha anche annunciato parte del lavoro che i suoi gruppi di ricerca hanno svolto nei campi dell’intelligenza artificiale, della realtà aumentata e dei computer grafica. Nel cinquantesimo anniversario dell'atterraggio lunare dell'Apollo 11, Nvidia ha mostrato come viene utilizzata la tecnologia ray tracing della sua scheda grafica RTX per migliorare visivamente le immagini catturato dalla NASA 50 anni fa. Al SIGGRAPH, l'impegno di Nvidia per commemorare l'Apollo 11 fa un ulteriore passo avanti, offrendo agli appassionati dello spazio l'opportunità di sovrapporsi a un breve video clip, come se fossero gli astronauti Neil Armstrong e Buzz Aldrin, utilizzando l'A.I. e la potenza del ray tracing per il rendering di questi video tempo reale.

"Quello che stiamo facendo è usare l'intelligenza artificiale per puntare una telecamera e le persone semplicemente in abiti civili, per poter effettuare una stima della posa 3D", ha spiegato Rob Estes, Nvidia TKTK. "Sappiamo dove si trovano nello spazio 3D e come si muovono i loro arti, quindi lo stiamo disegnando utilizzando tracciamento dei raggi e inserendoti nella scena con i tuoi movimenti come astronauta.

Fare il moonwalk sulla passeggiata lunare

I registi degli effetti visivi di Hollywood fanno qualcosa di simile da anni utilizzando uno schermo verde e attori in motion capture che indossano abiti con punti per replicare il movimento degli arti, ma il ray tracing e l'A.I. fare un ulteriore passo avanti eliminando la necessità di attrezzature specializzate e attori. "Potresti farlo ovunque tu possa filmare qualcuno", ha spiegato Estes sui vantaggi dell'intelligenza artificiale tracciamento dei raggi in questo esempio lunare. In sostanza, i partecipanti al SIGGRAPH possono filmare un breve montaggio video di se stessi nella tuta spaziale di Aldrin e Armstrong mentre fanno la passeggiata lunare come se fossero sulla luna come parte della missione Apollo 11.

"Avremo un modello della superficie lunare e del lander lunare, e gli faremo vedere di cosa si tratta." sarebbe come se fossero sulla luna.", ha detto, con tutti gli effetti di luce e il rendering eseguiti tempo reale. “Si tratta di una ricerca all’avanguardia e nessuno l’ha mai fatta prima. Stai pettinando l'A.I. e il ray tracing in un modo che presenta moltissimi vantaggi pratici”. Questi benefici non solo aiutano Hollywood e i suoi team di effetti visivi ma anche designer e ricercatori cercano di risolvere problemi difficili con la stima della ricerca, Nvidia allargato.

Rendering fovetato con occhiali da vista

Nvidia vuole rendere il rendering per le applicazioni di realtà aumentata e virtuale più realistico e nitido e sta applicando la sua tecnologia di rendering foveata per raggiungere questo obiettivo. Ciò che ha fatto il team di ricercatori di Nvidia è stato aggiungere il supporto per le lenti graduate, una novità assoluta per il settore. Sebbene questa sia ancora in fase iniziale di ricerca in questo momento, Nvidia prevede un giorno in cui chi indossa occhiali da vista non avrà bisogno di indossare occhiali separati dai loro dispositivi di realtà aumentata.

Nvidia sta lavorando con diversi tipi di display per poter costruire display VR o AR congruenti con gli occhiali da vista che potresti avere. "Questo è un grosso problema", ha detto Estes. "Non sei mai stato in grado di vedere 20/20 prima perché semplicemente non c'era l'acuità visiva per questi display."

Allo stesso modo in cui il ray tracing può portare effetti cinematografici realistici nei videogiochi, foveated il rendering può rendere le scene e le immagini AR più realistiche con una migliore risoluzione conservando potenza grafica. Invece di eseguire il rendering dell'intera scena, il rendering foveato consente ai creatori di eseguire il rendering solo della parte centrale della scena in alto fedeltà, che è dove solitamente si concentrano i tuoi occhi, e le aree periferiche possono essere renderizzate in modo meno dettagliato per risparmiare sulla GPU energia.

"Quindi stiamo lavorando per assicurarci di monitorare dove si trova il tuo gioco e di applicarlo in modo da diventare più veloce frame rate e una grafica migliore nella realizzazione della realtà aumentata, oppure questo potrebbe essere applicato anche alla realtà virtuale", ha affermato Este.

GauGAN, l'I.A. artista, viene liberato

In passato, Nvidia ha dimostrato come funziona GauGAN Lo strumento di disegno può trasformare anche chi tra noi ha problemi artistici in artisti permettendoti di disegnare complessi, paesaggi di vita reale con pochi semplici tratti sfruttando la potenza dell'artificiale intelligenza. Le scene disegnate dall'intelligenza artificiale, ha rivelato Nvidia, sono state utilizzate in alcuni grandi film di Hollywood anche come sfondi, con gli studi che hanno sovrapposto elementi che volevano creare l'atmosfera generale per la clip.

Invece di usare l'A.I. per identificare gli elementi di una scena, come un cane o un gatto, GauGAN, come suggerisce il nome, utilizza una rete generativa avversaria, o GAN. Specificando dove si trova il cielo disegnando una linea dell'orizzonte e dove l'oceano incontra il cielo, GauGAN inizia a “disegnare” la scena con nuvole e onde, e l'utente può aggiungere rocce e scogliere a questo paesaggio marino, rendendo la scena con ombre e riflessi. Quindi, invece di identificare gli oggetti in un'immagine, GAN aiuta a riempire l'immagine con una creazione e un rendering realistici della scena, ha spiegato Nvidia.

Data la popolarità dello strumento, Nvidia ha rivelato che espanderà l’accesso a GauGAN a tutti. Al momento, Estes ha affermato che non ci sono piani per monetizzare GauGAN, nonostante il suo lavoro creativo nel settore dell'industria cinematografica e che l'azienda sta semplicemente assaporando la gioia che traggono le altre persone usandolo.

Raccomandazioni degli editori

• Nvidia debutta con Portal: Prelude RTX e puoi giocarci gratuitamente
• 5 straordinarie funzionalità AI di Photoshop che puoi utilizzare ora
• Il supercomputer di Nvidia potrebbe inaugurare una nuova era di ChatGPT
• 3 motivi per cui dovresti comunque acquistare una GPU Nvidia invece di AMD
• Se hai una scheda grafica Nvidia, la tua CPU potrebbe soffrire in questo momento

Migliora il tuo stile di vitaDigital Trends aiuta i lettori a tenere d'occhio il frenetico mondo della tecnologia con tutte le ultime notizie, divertenti recensioni di prodotti, editoriali approfonditi e anteprime uniche nel loro genere.