Na konferenciji o obradi neuralnih informacija u Montrealu, Kanada, istraživači Nvidije pokazali su da oni mogao koristiti snagu umjetne inteligencije za prikaz sintetičkih, ali realističnih scena s detaljima i teksture. Istraživači tvrde da je posao još uvijek u ranoj fazi i nije jasno kada će tehnologija biti pušten potrošačima, ali postoji veliki potencijal za Nvidijino prikazivanje potaknuto umjetnom inteligencijom u prostor za igru.
"Ovaj rad govori o novom načinu renderiranja računalne grafike pomoću neuronskih mreža", rekao je Nvidijin potpredsjednik za primijenjeno dubinsko učenje Bryan Catanzaro u konferencijskom pozivu. Uglavnom, istraživači su htjeli znati kako mogu primijeniti A.I. kako bi računalna grafika bila bolja, a rješenje je primijeniti strojno učenje na videozapise iz stvarnog svijeta kako bi se prikazala nova grafika.
Preporučeni videozapisi
"Izgradili smo sustav koji uzima prikaze fizičkog svijeta na visokoj razini - u osnovi uzimajući video skicu i pretvarajući je u renderiranu scenu", rekao je Catanzaro. “Model razumije informacije visoke razine o objektima u stvarnom svijetu, a zatim ih razrađuje kako bi dodao informacije o teksturi i osvjetljenju. Cilj je moći sintetizirati nove scene s grafikom.”
Strojno učenje koristi se za analizu postojećih videa, a Nvidia bi primijenila tehnike računalnog vida za dodavanje oznaka objektima i njihovim svojstvima. To znači da je A.I. moći će prepoznati urbani gradski krajolik i razumjeti koji su objekti na primjer drveće, automobili ili zgrade.
Ova tehnologija je izvedena iz postojećih istraživanja, poput onog sa Sveučilišta Kalifornija, Berkeley, prema Nvidiji. Tvrtka je u prošlosti pokazala druge tehnike renderiranja temeljene na umjetnoj inteligenciji, uključujući onu koja bi uklonite šum sa slike.
Istraživači su uspjeli postići renderiranje u stvarnom vremenu na Tensor Core GPU-u, ali za konferenciju je Nvidia demonstrirala tehnologiju na svojoj Titan V kartici. “Iako to možete učiniti na bilo kojem procesoru, aspekt u stvarnom vremenu zahtijeva puno A.I. propusnost”, objasnio je Catanzaro, ističući da je Tensor Core GPU važan.
Budući da je u mogućnosti stvarati sadržaje i dodavati ih u virtualne svjetove, tržište igara moglo bi uvelike profitirati od rada ostvarenog ovim istraživanjem. Programeri bi, na primjer, mogli "remasterirati" stare igre ponovnim renderiranjem starih naslova kako bi dodali vizualne elemente visoke razlučivosti ili bi mogli dodati nove razine postojećim igrama uz malo truda.
Kao osnovni primjer kako bi ovo funkcioniralo, korisnici mogu sami snimiti video, uploadati ga u igru, a renderiranje će moći stvoriti visoko personalizirane avatare za korištenje u igri. Nvidia je upravo sada otvorila kôd iz svog istraživanja, ali Catanzaro upozorava da je rani rad na ovom polju prikladniji za računalne znanstvenike nego za programere igara.
U zasebnom demou, Nvidia je pokazala da može analizirati plesne pokrete — kao iz popularnog glazbenog videa Gangnam stil — i prenijeti te pokrete na drugu osobu koristeći iste tehnike računalnog vida. "Analiziramo šifru osobe i to postaje naša skica", rekao je Catanzaro. "A model renderira ciljanu osobu s obzirom na tu skicu."
Nvidia upozorava da je ovo još uvijek tehnologija u ranoj fazi, ali također možete nadograditi grafiku iz postojeću igru i uvježbajte model na slikama iz stvarnog svijeta kako biste ponovno prikazali stare igre kako bi izgledale bolje. Budući da tehnologija zahtijeva da računalo analizira objekte koji su poznati u stvarnom svijetu, Catanzaro upozorava da neće raditi na fantastičnim stvarima, poput renderiranja vilenjaka Djeda Mraza. U teoriji, priznaje, možete uvježbati računalo da renderira vilenjake, ali trebate stvoriti fizičke vilenjake i snimiti slike koje će računalo naučiti.
Poput praćenje zraka tehnologija koja je predstavljena na nedavnoj Nvidijinoj RTX seriji grafičke kartice za potrošače, tvrtka je rekla da se ovo renderiranje temeljeno na umjetnoj inteligenciji koristi na hibridan način i nije namijenjeno zamjeni tradicionalnih tehnika renderiranja. Umjesto toga, renderiranje temeljeno na umjetnoj inteligenciji trebalo bi koegzistirati i koristiti se s tradicionalnim motorima za renderiranje grafike.
Trenutačno nije jasno kada će ova tehnologija stići na tržište igara. Moglo bi potrajati samo nekoliko godina, optimistično je nagađao Catanzaro. U kombinaciji sa praćenje zraka, renderiranje scene temeljeno na umjetnoj inteligenciji pružit će kvalitetne vizualne prikaze u naslovima igara koji se renderiraju u stvarnom vremenu.
Preporuke urednika
- Testirao sam Nvidijinu novu RTX značajku i popravila je najgori dio igranja na računalu
- Vrhunski autori traže plaćanje od AI tvrtki za korištenje njihovog rada
- Wix koristi ChatGPT kako bi vam pomogao da brzo napravite cijelu web stranicu
- Ovaj misteriozni Nvidia GPU je apsolutna monstruoznost - i upravo smo dobili još jedan pogled
- Nvidijin RTX 4060 ipak možda i nije takvo razočaranje
Nadogradite svoj životni stilDigitalni trendovi pomažu čitateljima da prate brzi svijet tehnologije sa svim najnovijim vijestima, zabavnim recenzijama proizvoda, pronicljivim uvodnicima i jedinstvenim brzim pregledima.
