Aplicația Nvidia Smart Paintbrush transformă doodle-urile în imagini fotorealiste

Fotografie cercetătorilor Nvidia GauGAN
NVIDIA

O nouă aplicație de desen îmbunătățită cu funcții de învățare profundă ar putea converti în curând schițele și doodle-urile simple în opere de artă geniale și realiste.

Nvidia anunțat recent dezvoltarea GauGAN, o aplicație inteligentă de desen care utilizează a invatare profunda model pentru a genera versiuni fotorealiste ale desenelor simple create de artiști umani. Numele aplicației, GauGAN, se referă atât la pictorul francez post-impresionist Paul Gauguin, cât și la utilizarea de către aplicație a rețelelor generative adversarial (GAN) pentru a-și dezvolta imaginile realiste.

Videoclipuri recomandate

Deci, cum funcționează GauGAN? Conform anunțului Nvidia, aplicația este ca o „perie inteligentă” care completează detaliile desenului (denumită „hartă de segmentare”). În esență, oferiți schița a ceea ce doriți și etichetați fiecare segment, dictând ceea ce ar trebui să fie. De acolo, GauGAN preia controlul, completând detaliile suplimentare pentru a vă face desenele mai realiste:

Legate de

  • Nvidia renunță la RTX 4070 în timp ce trece la opțiuni mai ieftine
  • Nvidia poate avea un alt GPU monstru în lucru, iar prețul ar putea fi scandalos
  • Dezvoltatorul spune că vă poate transforma AMD 6800 XT într-un Nvidia 3090 Ti

„Instruit pe un milion de imagini, modelul de învățare profundă umple apoi peisajul cu spectacol rezultate: Desenați într-un iaz și elementele din apropiere, cum ar fi copacii și stâncile, vor apărea ca reflexii în apă. Schimbați o etichetă de segment de la „iarbă” la „zăpadă” și întreaga imagine se schimbă într-o scenă de iarnă, cu un copac cu frunze care devine steril.”

Transformarea schițelor în capodopere fotorealiste

GAN-urile utilizate în GauGAN sunt în esență un parteneriat între două rețele, un generator și un discriminator. În cadrul acestui parteneriat, un generator dezvoltă o serie de imagini posibile și discriminatorul acționează ca un fel de editor care învață generatorul „cum să îmbunătățească realismul sinteticului său imagini.”

De asemenea, merită remarcat faptul că, în timp ce GauGAN își folosește cunoștințele extinse despre alte imagini pentru a crea aceste desene, aceste desene sunt încă considerate lucrări originale, deoarece aplicația generează noi imagini.

Noua aplicație de desen de la Nvidia nu se limitează doar la scene sau peisaje ale naturii, ci poate adăuga și clădiri, drumuri sau chiar oameni. GauGAN permite, de asemenea, artiștilor să adauge filtre de stil. Astfel de filtre includ imitarea stilului unui anumit artist sau ajustarea luminii imaginii de la o scenă de zi la o scenă de noapte.

Nu este clar dacă GauGAN va fi lansat vreodată pentru uzul consumatorilor, dar se așteaptă să fie un instrument deosebit de util pentru arhitecți, urbaniști și chiar pentru dezvoltatorii de jocuri.

Recomandările editorilor

  • Oferta de pace a Nvidia nu funcționează
  • Noul instrument Guardrails al Nvidia rezolvă cea mai mare problemă cu chatbot-urile AI
  • Nvidia poate lucra la un GPU enorm cu patru sloturi
  • Cum funcționează DLSS 3 de la Nvidia (și de ce AMD FSR nu poate ajunge din urmă pentru moment)
  • Noul instrument AMD își compară GPU-urile cu cele ale Nvidia, dar există o captură

Îmbunătățește-ți stilul de viațăDigital Trends îi ajută pe cititori să țină cont de lumea rapidă a tehnologiei cu toate cele mai recente știri, recenzii distractive despre produse, editoriale perspicace și anticipări unice.