Neironu informācijas apstrādes konferencē Monreālā, Kanādā, Nvidia pētnieki pierādīja, ka viņi varētu izmantot mākslīgā intelekta spēku, lai atveidotu sintētiskas, tomēr reālistiskas ainas ar detaļām un tekstūras. Pētnieki apgalvo, ka darbs joprojām ir sākuma stadijā, un nav skaidrs, kad tehnoloģija būs izlaista patērētājiem, taču Nvidia mākslīgā intelekta vadītajai renderēšanai ir liels potenciāls spēļu telpa.
"Šis darbs ir par jaunu veidu, kā renderēt datorgrafiku, izmantojot neironu tīklus," konferences sarunā sacīja Nvidia lietišķās dziļās izglītības viceprezidents Braiens Katanzaro. Būtībā pētnieki vēlējās uzzināt, kā viņi var piemērot A.I. lai uzlabotu datorgrafiku, un risinājums ir izmantot mašīnmācīšanos reālos videoklipos, lai renderētu jaunu grafiku.
Ieteiktie videoklipi
"Mēs esam izveidojuši sistēmu, kas nodrošina augsta līmeņa fiziskās pasaules attēlojumu — pamatā tiek uzņemta video skice un pārvērsta to atveidotā ainā," sacīja Katanzaro. "Modelis saprot augsta līmeņa informāciju par objektiem reālajā pasaulē un pēc tam izstrādā tos, lai pievienotu tekstūras un apgaismojuma informāciju. Mērķis ir spēt sintezēt jaunas ainas ar grafiku.
Mašīnmācība tiek izmantota, lai analizētu esošos videoklipus, un Nvidia izmantos datorredzes metodes, lai objektiem un to īpašībām pievienotu etiķetes. Tas nozīmē, ka A.I. spētu atpazīt pilsētas ainavu un saprast, kas ir, piemēram, koki, automašīnas vai ēka.
Šī tehnoloģija ir iegūta no esošajiem pētījumiem, piemēram, Kalifornijas Universitātes Bērklijā, saskaņā ar Nvidia. Uzņēmums jau iepriekš ir parādījis citas uz A.I. balstītas renderēšanas metodes, tostarp tādas, kas to darītu noņemt attēla troksni.
Pētnieki varēja panākt reāllaika renderēšanu Tensor Core GPU, bet konferencē Nvidia demonstrēja tehnoloģiju savā Titan V kartē. “Lai gan to var izdarīt ar jebkuru procesoru, reāllaika aspektam ir nepieciešams daudz A.I. caurlaidspēja,” skaidroja Catanzaro, norādot, ka Tensor Core GPU ir svarīgs.
Spējot izveidot saturu un pievienot tos virtuālajām pasaulēm, spēļu tirgus varētu gūt lielu labumu no šī pētījuma radītā darba. Piemēram, izstrādātāji varētu “pārveidot” vecās spēles, atkārtoti renderējot vecos nosaukumus, lai pievienotu augstas izšķirtspējas vizuālos attēlus, vai arī viņi varētu pievienot jaunus līmeņus esošajām spēlēm ar nelielu piepūli.
Kā pamata piemērs tam, kā tas darbotos, lietotāji var uzņemt video ar sevi, augšupielādēt to spēlē, un renderēšana varēs izveidot ļoti personalizētus iemiesojumus izmantošanai spēlē. Nvidia šobrīd ir ieguvusi atklātā pirmkoda kodu no saviem pētījumiem, taču Catanzaro brīdina, ka agrīnais darbs šajā jomā ir vairāk piemērots datorzinātniekiem nekā spēļu izstrādātājiem.
Atsevišķā demonstrācijā Nvidia parādīja, ka tā var analizēt deju kustības, piemēram, no populārā mūzikas videoklipa Gangnam stils — un nodot šīs kustības citai personai, izmantojot tās pašas datorredzes metodes. "Mēs analizējam personas kodu, un tas kļūst par mūsu skici," sacīja Catanzaro. "Un modelis atveido mērķa personu, ņemot vērā šo skici."
Nvidia brīdina, ka šī joprojām ir agrīnas stadijas tehnoloģija, taču jūs varat arī jaunināt grafiku no esošu spēli un apmāciet modeli, izmantojot reālās pasaules attēlus, lai atkārtoti atveidotu vecās spēles, lai tās izskatītos labāk. Tā kā tehnoloģija prasa, lai dators analizētu objektus, kas ir zināmi reālajā pasaulē, Catanzaro brīdina, ka tā nedarbosies ar fantastiskām lietām, piemēram, Ziemassvētku vecīša elfu atveidošanu. Teorētiski viņš atzīst, ka jūs varat apmācīt datoru renderēt elfus, taču jums ir jāizveido fiziski elfi un jāuztver attēli, lai dators mācītos.
Kā staru izsekošana tehnoloģija, kas tika ieviesta Nvidia nesenajā RTX sērijā grafiskās kartes Patērētājiem uzņēmums teica, ka šī uz A.I. balstītā renderēšana tiek izmantota hibrīdā veidā un tā nav paredzēta, lai aizstātu tradicionālās renderēšanas metodes. Tā vietā uz mākslīgo intelektu balstīta renderēšana ir paredzēta līdzāspastāvēšanai un izmantošanai ar tradicionālajām grafikas renderēšanas programmām.
Pašlaik nav skaidrs, kad šī tehnoloģija nonāks spēļu tirgū. Tas varētu aizņemt tikai pāris gadus, optimistiski spekulēja Catanzaro. Apvienojumā ar staru izsekošana, A.I. balstīta ainu renderēšana nodrošinās kvalitatīvus vizuālos attēlus spēļu nosaukumos, kas tiek renderēti reāllaikā.
Redaktoru ieteikumi
- Es pārbaudīju Nvidia jauno RTX funkciju, un tā noteica datora spēļu sliktāko daļu
- Labākie autori pieprasa samaksu no AI firmām par viņu darba izmantošanu
- Wix izmanto ChatGPT, lai palīdzētu ātri izveidot visu vietni
- Šis noslēpumainais Nvidia GPU ir absolūts briesmonis, un mēs tikko ieguvām jaunu izskatu
- Galu galā Nvidia RTX 4060 varētu nebūt tik vilšanās
Uzlabojiet savu dzīvesveiduDigitālās tendences palīdz lasītājiem sekot līdzi steidzīgajai tehnoloģiju pasaulei, izmantojot visas jaunākās ziņas, jautrus produktu apskatus, ieskatu saturošus rakstus un unikālus ieskatus.
