Alla Neural Information Processing Conference di Montreal, in Canada, i ricercatori di Nvidia lo hanno dimostrato potrebbe utilizzare il potere dell'intelligenza artificiale per rendere scene sintetiche, ma realistiche, con dettagli e trame. I ricercatori sostengono che il lavoro è ancora nelle fasi iniziali e non è chiaro quando sarà disponibile la tecnologia rilasciato ai consumatori, ma c'è un grande potenziale per il rendering basato sull'intelligenza artificiale di Nvidia nel spazio di gioco.
"Questo lavoro riguarda un nuovo modo di rendere la grafica computerizzata utilizzando le reti neurali", ha affermato Bryan Catanzaro, vicepresidente dell'Applied Deep Learning di Nvidia, in una teleconferenza. Fondamentalmente, i ricercatori volevano sapere come applicare l’A.I. per migliorare la computer grafica e la soluzione è applicare l'apprendimento automatico ai video del mondo reale per riprodurre nuova grafica.
Video consigliati
"Abbiamo costruito un sistema che prende rappresentazioni di alto livello del mondo fisico, fondamentalmente prendendo uno schizzo video e convertendolo in una scena renderizzata", ha detto Catanzaro. “Il modello comprende le informazioni di alto livello degli oggetti nel mondo reale, quindi le elabora per aggiungere informazioni su texture e illuminazione. L’obiettivo è riuscire a sintetizzare nuove scene con la grafica.”
L'apprendimento automatico viene utilizzato per analizzare i video esistenti e Nvidia applicherebbe tecniche di visione artificiale per aggiungere etichette agli oggetti e alle loro proprietà. Ciò significa che l'A.I. sarebbe in grado di riconoscere un paesaggio urbano e capire quali oggetti sono alberi, automobili o edifici, per esempio.
Questa tecnologia deriva da ricerche esistenti, come quella dell'Università della California, Berkeley, secondo Nvidia. In passato l'azienda ha messo in mostra altre tecniche di rendering basate sull'intelligenza artificiale, inclusa una che lo farebbe rimuovere il rumore da un'immagine.
I ricercatori sono stati in grado di ottenere il rendering in tempo reale su una GPU Tensor Core, ma per la conferenza Nvidia ha dimostrato la tecnologia sulla sua scheda Titan V. “Sebbene sia possibile farlo su qualsiasi processore, l’aspetto in tempo reale richiede molta intelligenza artificiale. throughput", ha spiegato Catanzaro, sottolineando che la GPU Tensor Core è importante.
Essendo in grado di creare contenuti e aggiungerli ai mondi virtuali, il mercato dei giochi potrebbe trarre grandi benefici dal lavoro creato da questa ricerca. Gli sviluppatori, ad esempio, potrebbero “rimasterizzare” vecchi giochi eseguendo nuovamente il rendering dei vecchi titoli per aggiungere immagini ad alta definizione, oppure potrebbero aggiungere nuovi livelli ai giochi esistenti con poco sforzo.
Come esempio di base di come funzionerebbe, gli utenti possono realizzare un video di se stessi, caricarlo in un gioco e il rendering sarà in grado di creare avatar altamente personalizzati da utilizzare nel gioco. Nvidia ha reso open source il codice della sua ricerca in questo momento, ma Catanzaro avverte che i primi lavori in questo campo sono più adatti agli informatici che agli sviluppatori di giochi.
In una demo separata, Nvidia ha dimostrato di poter analizzare i passi di danza, come nel popolare video musicale stile Gangnam - e trasferire quei movimenti a un'altra persona utilizzando le stesse tecniche di visione artificiale. “Analizziamo il codice della persona e quello diventa il nostro schizzo”, ha detto Catanzaro. "E il modello rende la persona target in base a quello schizzo."
Nvidia avverte che questa è ancora una tecnologia in fase iniziale, ma è anche possibile aggiornarne la grafica un gioco esistente e addestrare un modello su immagini del mondo reale per eseguire nuovamente il rendering di vecchi giochi per farli sembrare migliori. Poiché la tecnologia richiede che il computer analizzi oggetti conosciuti nel mondo reale, Catanzaro avverte che non funzionerà su cose fantastiche, come il rendering degli elfi di Babbo Natale. In teoria, ammette, è possibile addestrare il computer a riprodurre gli elfi, ma è necessario creare elfi fisici e catturare immagini affinché il computer possa imparare.
Come il tracciamento dei raggi tecnologia introdotta nella recente serie RTX di Nvidia schede grafiche per i consumatori, la società ha affermato che questo rendering basato sull’intelligenza artificiale viene utilizzato in modo ibrido e non è destinato a sostituire le tecniche di rendering tradizionali. Invece, il rendering basato sull’intelligenza artificiale è pensato per coesistere ed essere utilizzato con i tradizionali motori di rendering grafico.
Al momento, non è chiaro quando questa tecnologia arriverà sul mercato dei giochi. Potrebbero volerci anche solo un paio d’anni, ipotizzava ottimisticamente Catanzaro. Combinata con tracciamento dei raggi, il rendering delle scene basato sull'intelligenza artificiale fornirà immagini di qualità nei titoli dei giochi renderizzati in tempo reale.
Raccomandazioni degli editori
- Ho testato la nuova funzionalità RTX di Nvidia e ha risolto la parte peggiore dei giochi per PC
- Gli autori più importanti richiedono un pagamento alle aziende di intelligenza artificiale per l’utilizzo del loro lavoro
- Wix utilizza ChatGPT per aiutarti a creare rapidamente un intero sito web
- Questa misteriosa GPU Nvidia è una mostruosità assoluta e abbiamo appena dato un'altra occhiata
- Dopotutto, l'RTX 4060 di Nvidia potrebbe non essere una tale delusione
Migliora il tuo stile di vitaDigital Trends aiuta i lettori a tenere d'occhio il frenetico mondo della tecnologia con tutte le ultime notizie, divertenti recensioni di prodotti, editoriali approfonditi e anteprime uniche nel loro genere.
