Nvidijin A.I. in Ray Tracing ustvarja Moonwalk video selfije na Luni

Poleg lansiranja 10 novih prenosnikov RTX Studio, namenjenih ustvarjalcem pri SIGGRAPH, je Nvidia napovedala tudi nekaj dela ki jih njene raziskovalne skupine izvajajo na področjih umetne inteligence, razširjene resničnosti in računalništva grafika. Ob 50. obletnici pristanka Apolla 11 na Luni je Nvidia predstavila, kako se tehnologija sledenja žarkom iz njene grafične kartice RTX uporablja za vizualno izboljšati slike ki ga je NASA posnela pred 50 leti. Na SIGGRAPH gre Nvidijino prizadevanje za počastitev Apolla 11 še korak dlje in ljubiteljem vesolja omogoča priložnost, da se postavijo v kratek videoposnetek, kot da bi bila astronavta Neil Armstrong in Buzz Aldrin, z uporabo A.I. in moč sledenja žarkom za upodabljanje teh videoposnetkov v realnem času.

"To, kar počnemo, je uporaba umetne inteligence za usmerjanje kamere in ljudi samo v njihovih uličnih oblačilih, da bi lahko naredili 3D oceno poze," je pojasnil Rob Estes, Nvidia TKTK. »Vemo, kje so v 3D prostoru, in vemo, kako se premikajo njihovi udi, zato to rišemo z uporabo

Izvajati moonwalk na moon walk

Hollywoodski režiserji vizualnih učinkov že leta počnejo nekaj podobnega z uporabo zelenega zaslona in igralcev, ki zajemajo gibanje, oblečenih v obleke s pikami za posnemanje gibanja okončin, vendar sledenje žarkom in A.I. naredite korak naprej, tako da odpravite potrebo po specializirani opremi in igralci. "To bi lahko naredili kjerkoli, kjer bi lahko nekoga posneli," je Estes pojasnil prednosti A.I. sledenje žarkom v tem luninem primeru. V bistvu lahko obiskovalci SIGGRAPH posnamejo kratko video montažo sebe v vesoljski obleki Aldrina in Armstronga med hojo po luni, kot da bi bili na luni kot del misije Apollo 11.

»Imeli bomo maketo luninega površja in luninega pristajalnika in omogočili jim bomo, da vidijo, kaj je bi bilo, kot da bi bili na luni,« je dejal z vsemi svetlobnimi učinki in upodabljanjem v v realnem času. »To je zelo vrhunska raziskava in tega ni naredil še nihče. Prečesate A.I. in sledenje žarkom na način, ki ima veliko, veliko praktičnih koristi.« Te ugodnosti ne pomagajo samo Hollywoodu in njene ekipe za vizualne učinke, ampak tudi oblikovalci in raziskovalci, ki poskušajo rešiti težke težave z raziskovalno oceno, Nvidia razširjeno.

Foveated upodabljanje z dioptrijskimi očali

Nvidia želi narediti upodabljanje za aplikacije razširjene in navidezne resničnosti bolj realistično in jasno, zato uporablja svojo tehnologijo foveated upodabljanja, da bi to dosegla. Ekipa raziskovalcev pri Nvidii je dodala podporo za leče na recept, kar je prva v industriji. Čeprav je to trenutno še v zgodnji fazi raziskav, Nvidia predvideva dan, ko uporabnikom očal na recept ne bo treba nositi ločenih očal od svojih naprav za razširjeno resničnost.

Nvidia dela z več vrstami zaslonov, da bi lahko zgradila zaslon VR ali AR, ki je skladen z očali na recept, ki jih morda imate. "To je velik posel," je dejal Estes. "Nikoli prej niste mogli videti 20/20, ker preprosto ni bilo ostrine vida za te zaslone."

Na enak način, kot lahko sledenje žarkom prinese življenjske kinematografske učinke v video igre, foveated upodabljanje lahko naredi prizore in slike AR bolj realistične z boljšo ločljivostjo z ohranjanjem grafična moč. Namesto upodabljanja celotnega prizora foveated upodabljanje omogoča ustvarjalcem, da upodabljajo samo srednji del prizora v visoki zvestoba, kamor se običajno osredotočijo vaše oči, obrobna območja pa so lahko upodobljena manj podrobno, da prihranite na grafični procesorji moč.

»Torej delamo na tem, da zagotovimo, da sledimo, kje je vaša igra, in to uporabimo, da postanete hitrejši število sličic in boljšo grafiko pri izvajanju razširjene resničnosti ali pa bi to lahko uporabili tudi za virtualno resničnost,« je dejal Estes.

GauGAN, A.I. umetnik, je osvobojen

V preteklosti je Nvidia pokazala, kako je GauGAN orodje za risanje lahko celo tiste, ki imajo težave z umetnostjo, spremeni v umetnike, saj vam omogoča risanje zapletenih, življenje-življenjske pokrajine z le nekaj preprostimi potezami z izkoriščanjem moči umetnega inteligenca. Nvidia je razkrila, da so bili prizori, ki jih je narisala umetna inteligenca, uporabljeni v nekaterih hollywoodskih filmih z velikimi imeni tudi kot kulise, pri čemer so studii prekrivali elemente, s katerimi so želeli ustvariti splošno vzdušje posnetka.

Namesto uporabe A.I. za prepoznavanje elementov prizora, kot sta pes ali mačka, GauGAN, kot pove že njegovo ime, uporablja generativno kontradiktorno mrežo ali GAN. Z določitvijo, kje je nebo z risanjem črte obzorja in kje se ocean sreča z nebom, GauGAN začne "risati" prizor z oblake in valove, uporabnik pa lahko tej morski pokrajini doda skale in morske pečine, tako da prizor prikaže s pravimi sencami in razmišljanja. Torej namesto prepoznavanja predmetov na sliki GAN pomaga zapolniti sliko z realističnim ustvarjanjem in upodabljanjem scene, je pojasnila Nvidia.

Glede na priljubljenost orodja je Nvidia razkrila, da bo razširila dostop do GauGAN vsem. Trenutno je Estes dejal, da ni načrtov za monetizacijo GauGAN, kljub njegovemu ustvarjalnemu delu v filmsko industrijo in da podjetje preprosto uživa v veselju, ki ga prinašajo drugi ljudje uporabo.

Priporočila urednikov

• Nvidia debitira Portal: Prelude RTX in lahko ga igrate brezplačno
• 5 neverjetnih funkcij AI v Photoshopu, ki jih lahko uporabljate zdaj
• Nvidijin superračunalnik lahko prinese novo dobo ChatGPT
• 3 razlogi, zakaj bi vseeno morali kupiti Nvidia GPE namesto AMD
• Če imate grafično kartico Nvidia, morda trenutno trpi vaš CPE

Nadgradite svoj življenjski slogDigitalni trendi pomagajo bralcem slediti hitremu svetu tehnologije z vsemi najnovejšimi novicami, zabavnimi ocenami izdelkov, pronicljivimi uvodniki in enkratnimi vpogledi v vsebine.