Nvidia Smart Paintbrush-app gør Doodles til fotorealistiske billeder

Nvidia GauGAN Forskerbillede
NVIDIA

En ny tegneapp forbedret med dybe læringsfunktioner kan snart konvertere dine simple skitser og kruseduller til strålende og realistiske kunstværker.

Nvidia for nylig annonceret udviklingen af ​​GauGAN, en smart tegne-app, der bruger en dyb læring model til at generere fotorealistiske versioner af simple tegninger skabt af menneskelige kunstnere. Appens navn, GauGAN, henviser både til den franske post-impressionistiske maler Paul Gauguin og appens brug af de generative adversarial networks (GAN'er) til at udvikle sine realistiske billeder.

Anbefalede videoer

Så hvordan virker GauGAN? Ifølge Nvidias meddelelse er appen som en "smart pensel", der udfylder detaljerne i din tegning (omtalt som et "segmenteringskort"). I bund og grund giver du omridset af, hvad du vil have, og mærker hvert segment, og dikterer, hvad det skal være. Derfra tager GauGAN over og udfylder de ekstra detaljer for at gøre dine tegninger mere realistiske:

Relaterede

  • Nvidia dropper RTX 4070, da det vender sig til billigere muligheder
  • Nvidia har muligvis endnu en monster-GPU på vej, og prisen kan være uhyrlig
  • Udvikler siger, at det kan forvandle din AMD 6800 XT til en Nvidia 3090 Ti

"Trænet på en million billeder, udfylder den dybe læringsmodel landskabet med showstopping resultater: Tegn i en dam, og nærliggende elementer som træer og sten vil fremstå som refleksioner i vand. Skift en segmentetiket fra "græs" til "sne", og hele billedet ændres til en vinterscene, hvor et tidligere løvrigt træ bliver goldt.

Ændrer skitser til fotorealistiske mesterværker

GAN'erne brugt i GauGAN er i det væsentlige et partnerskab mellem to netværk, en generator og en diskriminator. Inden for dette partnerskab udvikler en generator en række mulige billeder og diskriminatoren fungerer som en slags redaktør, der lærer generatoren "hvordan man forbedrer realismen af ​​sin syntetiske billeder."

Det er også værd at bemærke, at mens GauGAN bruger sin omfattende viden om andre billeder til at skabe Disse tegninger betragtes stadig som originale værker, da appen genererer nye billeder.

Nvidias nye tegneapp er ikke kun begrænset til naturscener eller landskaber – den kan også tilføje bygninger, veje eller endda mennesker. GauGAN giver også kunstnere mulighed for at tilføje stilfiltre. Sådanne filtre inkluderer efterligning af en specifik kunstners stil eller justering af belysningen af ​​billedet fra en dag til en natscene.

Det er uklart, om GauGAN nogensinde vil blive frigivet til forbrugerbrug, men det forventes at være et særligt nyttigt værktøj for arkitekter, byplanlæggere og endda spiludviklere.

Redaktørens anbefalinger

  • Nvidias fredstilbud virker ikke
  • Nvidias nye Guardrails-værktøj løser det største problem med AI-chatbots
  • Nvidia arbejder muligvis på en enorm quad-slot GPU
  • Hvordan Nvidias DLSS 3 virker (og hvorfor AMD FSR ikke kan indhente det lige nu)
  • AMD's nye værktøj sammenligner sine GPU'er med Nvidias, men der er en fangst

Opgrader din livsstilDigital Trends hjælper læserne med at holde styr på den hurtige teknologiske verden med alle de seneste nyheder, sjove produktanmeldelser, indsigtsfulde redaktionelle artikler og enestående smugkig.