Neural Information Processing Conference -konferenssissa Montrealissa, Kanadassa, Nvidian tutkijat osoittivat, että he voisi käyttää tekoälyn voimaa luodakseen synteettisiä, mutta realistisia, yksityiskohtia ja yksityiskohtia sisältäviä kohtauksia tekstuurit. Tutkijat väittävät, että työ on vielä alkuvaiheessa, ja on epäselvää, milloin tekniikka valmistuu julkaistaan kuluttajille, mutta Nvidian tekoälyyn perustuvalla renderöinnillä on suuri potentiaali pelitilaa.
"Tämä työ käsittelee uutta tapaa renderöidä tietokonegrafiikkaa käyttämällä hermoverkkoja", Nvidian Applied Deep Learning -yksikön johtaja Bryan Catanzaro sanoi konferenssipuhelussa. Pohjimmiltaan tutkijat halusivat tietää, kuinka he voivat soveltaa A.I. parantaa tietokonegrafiikkaa, ja ratkaisu on soveltaa koneoppimista tosielämän videoihin uuden grafiikan renderöimiseksi.
Suositellut videot
"Olemme rakentaneet järjestelmän, joka ottaa korkean tason esityksiä fyysisestä maailmasta - periaatteessa otamme videoluonnoksen ja muunnamme sen renderoiduksi kohtaukseksi", Catanzaro sanoi. ”Malli ymmärtää korkean tason informaatiota todellisen maailman esineistä ja kehittää niitä sitten pintakuvio- ja valaistustietojen lisäämiseksi. Tavoitteena on pystyä syntetisoimaan uusia kohtauksia grafiikan avulla."
Koneoppimista käytetään olemassa olevien videoiden analysointiin, ja Nvidia soveltaisi tietokonenäkötekniikoita nimikkeiden lisäämiseen objekteihin ja niiden ominaisuuksiin. Tämä tarkoittaa, että A.I. osaisi tunnistaa urbaanin kaupunkikuvan ja ymmärtää mitä esineitä ovat esimerkiksi puut, autot tai rakennukset.
Tämä tekniikka on johdettu olemassa olevista tutkimuksista, kuten Kalifornian yliopiston Berkeleyn tutkimuksesta, Nvidian mukaan. Yritys on aiemmin esitellyt muita A.I.-pohjaisia renderöintitekniikoita, mukaan lukien sellainen, joka tekisi poistaa kohinaa kuvasta.
Tutkijat onnistuivat saamaan aikaan reaaliaikaisen renderöinnin Tensor Core GPU: lla, mutta konferenssia varten Nvidia esitteli tekniikkaa Titan V -kortilla. "Vaikka voit tehdä tämän millä tahansa prosessorilla, reaaliaikainen näkökulma vaatii paljon A.I. suorituskykyä”, Catanzaro selitti ja huomautti, että Tensor Core GPU on tärkeä.
Voimalla luoda sisältöä ja lisäämällä niitä virtuaalimaailmoihin pelimarkkinat voivat hyötyä suuresti tämän tutkimuksen tuottamasta työstä. Kehittäjät voivat esimerkiksi "remasteroida" vanhoja pelejä renderöimällä vanhoja nimikkeitä uudelleen teräväpiirtovisuaalien lisäämiseksi, tai he voivat lisätä uusia tasoja olemassa oleviin peleihin pienellä vaivalla.
Perusesimerkkinä siitä, kuinka tämä toimisi, käyttäjät voivat ottaa videon itsestään, ladata sen peliin, ja renderöinnillä voidaan luoda erittäin personoituja avatareja käytettäväksi pelissä. Nvidia on tällä hetkellä hankkinut avoimen lähdekoodin tutkimuksestaan, mutta Catanzaro varoittaa, että tämän alan varhainen työ sopii paremmin tietojenkäsittelytieteilijöille kuin pelien kehittäjille.
Erillisessä demossa Nvidia esitteli, että se pystyi analysoimaan tanssiliikkeitä - kuten suositusta musiikkivideosta Gangnam-tyyli — ja siirrä nuo liikkeet toiselle henkilölle samoja tietokonenäkötekniikoita käyttäen. "Analysoimme henkilön koodin, ja siitä tulee luonnos", Catanzaro sanoi. "Ja malli tekee kohteena olevan henkilön tämän luonnoksen perusteella."
Nvidia varoittaa, että tämä on vielä varhaisen vaiheen tekniikkaa, mutta voit myös päivittää grafiikkaa olemassa oleva peli ja kouluta malli todellisen maailman kuvilla renderöimään vanhat pelit uudelleen, jotta ne näyttävät paremmilta. Koska tekniikka vaatii tietokonetta analysoimaan todellisessa maailmassa tunnettuja esineitä, Catanzaro varoittaa, että se ei toimi fantastisissa asioissa, kuten joulupukin tonttujen renderöinnissa. Hän myöntää, että teoriassa voit kouluttaa tietokoneen renderöimään tonttuja, mutta sinun on luotava fyysisiä tonttuja ja otettava kuvia tietokoneen oppimista varten.
Kuin säteen jäljitys teknologiaa, joka esiteltiin Nvidian viimeaikaisessa RTX-sarjassa näytönohjaimet kuluttajille yritys sanoi, että tätä A.I.-pohjaista renderöintiä käytetään hybridimuodossa, eikä sen ole tarkoitus korvata perinteisiä renderöintitekniikoita. Sen sijaan A.I.-pohjainen renderöinti on tarkoitettu olemassa ja käytettäväksi perinteisten grafiikan renderöintikoneiden kanssa.
Tällä hetkellä on epäselvää, milloin tämä tekniikka tulee pelimarkkinoille. Se voi kestää vain muutaman vuoden, Catanzaro spekuloi optimistisesti. Yhdistettynä säteen jäljitys, A.I.-pohjainen kohtausten renderöinti tarjoaa laadukkaita visuaalisia pelinimikkeitä, jotka renderöidään reaaliajassa.
Toimittajien suositukset
- Testasin Nvidian uutta RTX-ominaisuutta, ja se korjasi PC-pelaamisen huonoimman osan
- Huippukirjailijat vaativat tekoälyyrityksiltä maksua työnsä käytöstä
- Wix käyttää ChatGPT: tä auttaakseen sinua rakentamaan nopeasti koko verkkosivuston
- Tämä salaperäinen Nvidia GPU on ehdoton hirviö – ja saimme juuri uuden ilmeen
- Nvidian RTX 4060 ei ehkä ole niin suuri pettymys
Päivitä elämäntapasiDigital Trends auttaa lukijoita pysymään tekniikan nopeatempoisessa maailmassa uusimpien uutisten, hauskojen tuotearvostelujen, oivaltavien toimitusten ja ainutlaatuisten kurkistusten avulla.
