Nvidia Smart Paintbrush App muuttaa Doodleista fotorealistisia kuvia

Nvidia GauGAN Researchers Photo
NVIDIA

Uusi syväoppimistoiminnoilla tehostettu piirustussovellus voi pian muuntaa yksinkertaiset luonnokset ja piirrokset loistaviksi ja realistisiksi taideteoksiksi.

Nvidia äskettäin ilmoitettu kehitettiin GauGAN, älykäs piirustussovellus, joka käyttää a syvä oppiminen malli, jolla luodaan fotorealistisia versioita ihmistaiteilijoiden luomista yksinkertaisista piirustuksista. Sovelluksen nimi GauGAN viittaa sekä ranskalaiseen post-impressionistiseen taidemaalariin Paul Gauguiniin että sovelluksen luovien kilpailevien verkkojen (GAN) käyttöön realististen kuviensa kehittämiseen.

Suositellut videot

Joten miten GauGAN toimii? Nvidian ilmoituksen mukaan sovellus on kuin "älykäs sivellin", joka täyttää piirustuksesi tiedot (jota kutsutaan "segmentointikartaksi"). Pohjimmiltaan annat ääriviivat siitä, mitä haluat, ja nimeät jokaisen segmentin ja sanelet, mitä sen pitäisi olla. Sieltä GauGAN ottaa haltuunsa ja täyttää lisätiedot tehdäkseen piirustuksistasi realistisempia:

Liittyvät

  • Nvidia luopuu RTX 4070:stä, koska se siirtyy halvempiin vaihtoehtoihin
  • Nvidialla voi olla toinenkin hirviö GPU työn alla, ja hinta voi olla törkeä
  • Kehittäjä sanoo, että se voi muuttaa AMD 6800 XT: si Nvidia 3090 Ti: ksi

”Miljoonaan kuvaan koulutettu syväoppimismalli täyttää sitten maiseman esittelyillä tulokset: Piirrä lampi, ja lähellä olevat elementit, kuten puut ja kivet, näkyvät heijastuksina vettä. Vaihda segmentin nimi "ruoho" "lumi" ja koko kuva muuttuu talvimaisemaksi, jossa entinen lehtipuu muuttuu karuksi.

Luonnosten muuttaminen fotorealistisiksi mestariteoksiksi

GauGANissa käytetyt GAN-verkot ovat pohjimmiltaan kumppanuus kahden verkon, generaattorin ja erottajan, välillä. Tämän kumppanuuden puitteissa generaattori kehittää sarjan mahdollisia kuvia ja erottajaa toimii eräänlaisena editorina, joka opettaa generaattorille "kuinka parantaa sen synteettisen realismia kuvia."

On myös syytä huomata, että vaikka GauGAN käyttää laajaa tietämystään muista kuvista luodakseen näitä piirustuksia pidetään edelleen alkuperäisinä teoksina, koska sovellus luo uusia kuvia.

Nvidian uusi piirustussovellus ei rajoitu vain luontokohtauksiin tai maisemiin – se voi myös lisätä rakennuksia, teitä tai jopa ihmisiä. GauGAN sallii myös taiteilijoiden lisätä tyylisuodattimia. Tällaisia ​​suodattimia ovat esimerkiksi tietyn taiteilijan tyylin matkiminen tai kuvan valaistuksen säätäminen päivä- ja yönäkymästä.

On epäselvää, julkaistaanko GauGAN koskaan kuluttajakäyttöön, mutta sen odotetaan olevan erityisen hyödyllinen työkalu arkkitehdeille, kaupunkisuunnittelijoille ja jopa pelien kehittäjille.

Toimittajien suositukset

  • Nvidian rauhantarjous ei toimi
  • Nvidian uusi Guardrails-työkalu korjaa AI-chatbottien suurimman ongelman
  • Nvidia saattaa työskennellä valtavan nelipaikkaisen GPU: n parissa
  • Kuinka Nvidian DLSS 3 toimii (ja miksi AMD FSR ei pääse kiinni toistaiseksi)
  • AMD: n uusi työkalu vertaa grafiikkasuoritteitaan Nvidiaan, mutta siinä on saalis

Päivitä elämäntapasiDigital Trends auttaa lukijoita pysymään tekniikan nopeatempoisessa maailmassa uusimpien uutisten, hauskojen tuotearvostelujen, oivaltavien toimitusten ja ainutlaatuisten kurkistusten avulla.