Kanadas Montrealis toimunud närviteabe töötlemise konverentsil näitasid Nvidia teadlased, et nad võiks kasutada tehisintellekti jõudu sünteetiliste, kuid samas realistlike detailide ja stseenidega stseenide esitamiseks tekstuurid. Teadlased väidavad, et töö on alles algusjärgus ja pole selge, millal tehnoloogia valmib tarbijatele avaldatud, kuid Nvidia tehisintellektipõhisel renderdamisel on suur potentsiaal. mänguruum.
"See töö käsitleb uut viisi arvutigraafika renderdamiseks närvivõrkude abil," ütles Nvidia rakendusliku süvaõppe asepresident Bryan Catanzaro konverentskõnes. Põhimõtteliselt tahtsid teadlased teada, kuidas nad saavad rakendada A.I. arvutigraafika paremaks muutmiseks ja lahenduseks on masinõppe rakendamine reaalsetes videotes, et uut graafikat renderdada.
Soovitatud videod
"Oleme loonud süsteemi, mis kujutab endast kõrgel tasemel füüsilist maailma – põhimõtteliselt võetakse videosketš ja teisendame selle renderdatud stseeniks," ütles Catanzaro. "Mudel mõistab reaalses maailmas olevate objektide kõrgetasemelist teavet ja seejärel töötab need välja tekstuuri- ja valgustusteabe lisamiseks. Eesmärk on graafikaga uusi stseene sünteesida.
Olemasolevate videote analüüsimiseks kasutatakse masinõpet ja Nvidia rakendaks objektidele ja nende omadustele siltide lisamiseks arvutinägemise tehnikaid. See tähendab, et A.I. suudaks ära tunda linnalise linnapildi ja mõistaks, mis objektid on näiteks puud, autod või ehitised.
Nvidia andmetel on see tehnoloogia tuletatud olemasolevatest uuringutest, näiteks California ülikooli Berkeley omast. Ettevõte on varem näidanud teisi AI-põhiseid renderdustehnikaid, sealhulgas sellist, mis seda teeks eemaldage pildilt müra.
Teadlased suutsid saavutada reaalajas renderdamise Tensor Core GPU-l, kuid konverentsi jaoks demonstreeris Nvidia tehnoloogiat oma Titan V kaardil. "Kuigi saate seda teha mis tahes protsessoriga, nõuab reaalajas palju A.I. läbilaskevõime,” selgitas Catanzaro, märkides, et Tensor Core GPU on oluline.
Tänu võimalusele luua sisu ja lisada see virtuaalmaailmadesse, võib mänguturg selle uuringuga tehtud tööst palju kasu saada. Näiteks võivad arendajad vanu mänge ümber kujundada, renderdades vanad pealkirjad uuesti kõrglahutusega visuaalide lisamiseks, või lisada olemasolevatele mängudele vähese vaevaga uusi tasemeid.
Selle toimimise põhinäitena saavad kasutajad endast video teha, selle mängu üles laadida ja renderdamisel saab luua mängus kasutamiseks väga isikupärastatud avatare. Nvidia on praegu oma uurimistööst saadud koodi avatud lähtekoodiga, kuid Catanzaro hoiatab, et selle valdkonna varajane töö sobib rohkem arvutiteadlastele kui mänguarendajatele.
Eraldi demos näitas Nvidia, et see suudab analüüsida tantsuliigutusi - nagu populaarsest muusikavideost Gangnami stiil — ja kandke need käigud üle teisele inimesele, kasutades samu arvutinägemise tehnikaid. "Analüüsime inimese koodi ja sellest saab meie visand," ütles Catanzaro. "Ja mudel renderdab selle visandi põhjal sihtisiku."
Nvidia hoiatab, et see on veel varajases staadiumis tehnoloogia, kuid graafikat saate uuendada ka olemasolevat mängu ja treenige mudelit reaalsete piltide põhjal, et vanad mängud paremini välja nägema muuta. Kuna tehnoloogia nõuab, et arvuti analüüsiks reaalses maailmas tuntud objekte, hoiatab Catanzaro, et see ei tööta fantastiliste asjade puhul, näiteks jõuluvana päkapikkude renderdamisel. Ta tunnistab, et teoreetiliselt saab arvutit õpetada päkapikke renderdama, kuid peate looma füüsilised päkapikud ja jäädvustama pilte, et arvuti saaks õppida.
Nagu kiirte jälgimine tehnoloogia, mis võeti kasutusele Nvidia hiljutises RTX-seerias graafikakaardid tarbijate jaoks ütles ettevõte, et seda A.I-põhist renderdamist kasutatakse hübriidsel viisil ja see ei ole mõeldud traditsiooniliste renderdustehnikate asendamiseks. Selle asemel on A.I-põhine renderdus mõeldud koos eksisteerima ja kasutamiseks koos traditsiooniliste graafika renderdusmootoritega.
Praegu on ebaselge, millal see tehnoloogia mänguturule jõuab. See võib võtta paar aastat, spekuleeris Catanzaro optimistlikult. Kombineeritud koos kiirte jälgimine, A.I.-põhine stseeni renderdamine pakub kvaliteetseid visuaale mängude pealkirjades, mis renderdatakse reaalajas.
Toimetajate soovitused
- Testisin Nvidia uut RTX-funktsiooni ja see parandas arvutimängude halvima osa
- Tippautorid nõuavad tehisintellektifirmadelt nende töö kasutamise eest tasu
- Wix kasutab ChatGPT-d, mis aitab teil kiiresti terve veebisaidi luua
- See salapärane Nvidia GPU on täielik koletis – ja saime just uue pilgu
- Nvidia RTX 4060 ei pruugi olla selline pettumus
Uuenda oma elustiiliDigitaalsed suundumused aitavad lugejatel hoida silma peal kiirel tehnikamaailmal kõigi viimaste uudiste, lõbusate tooteülevaadete, sisukate juhtkirjade ja ainulaadsete lühiülevaadetega.
