Aplikacja Nvidia Smart Paintbrush zamienia gryzmoły w fotorealistyczne obrazy

Zdjęcie badaczy Nvidia GauGAN
NVIDIA

Nowa aplikacja do rysowania wzbogacona o funkcje głębokiego uczenia się może wkrótce przekształcić Twoje proste szkice i bazgroły w genialne i realistyczne dzieła sztuki.

Nvidia niedawno ogłoszone rozwój GauGAN, inteligentnej aplikacji do rysowania, która wykorzystuje głęboka nauka model do generowania fotorealistycznych wersji prostych rysunków stworzonych przez artystów-ludzi. Nazwa aplikacji GauGAN nawiązuje zarówno do francuskiego malarza postimpresjonistycznego Paula Gauguina, jak i do wykorzystania przez aplikację generatywnych sieci kontradyktoryjnych (GAN) do tworzenia realistycznych obrazów.

Polecane filmy

Jak więc działa GauGAN? Zgodnie z zapowiedzią Nvidii aplikacja przypomina „inteligentny pędzel”, który wypełnia szczegóły rysunku (tzw. „mapa segmentacji”). Zasadniczo przedstawiasz zarys tego, czego chcesz i oznaczasz każdy segment, dyktując, jaki powinien być. Następnie GauGAN przejmuje kontrolę i uzupełnia dodatkowe szczegóły, aby Twoje rysunki były bardziej realistyczne:

Powiązany

  • Nvidia porzuca RTX 4070 na rzecz tańszych opcji
  • Nvidia może mieć w przygotowaniu kolejny potworny procesor graficzny, a cena może być oburzająca
  • Deweloper twierdzi, że może zamienić AMD 6800 XT w Nvidię 3090 Ti

„Wyszkolony na milionach obrazów model głębokiego uczenia się następnie wypełnia krajobraz, zatrzymując pokazy wyniki: narysuj staw, a pobliskie elementy, takie jak drzewa i skały, pojawią się jako odbicia w obrazie woda. Zamień etykietę segmentu z „trawa” na „śnieg”, a cały obraz zmieni się w zimową scenę, w której wcześniej liściaste drzewo staje się jałowe”.

Zmiana szkiców w fotorealistyczne arcydzieła

Sieci GAN stosowane w GauGAN to zasadniczo partnerstwo pomiędzy dwiema sieciami, generatorem i dyskryminatorem. W ramach tego partnerstwa generator opracowuje serię możliwych obrazów i dyskryminator pełni rolę swego rodzaju edytora, który uczy generatora, „jak poprawić realizm jego syntezy obrazy."

Warto też dodać, że GauGAN przy tworzeniu wykorzystuje swoją rozległą wiedzę na temat innych obrazów te rysunki, są one nadal uważane za oryginalne dzieła, ponieważ aplikacja generuje nowe obrazy.

Nowa aplikacja do rysowania firmy Nvidia nie ogranicza się tylko do scen przyrodniczych i krajobrazów — może także dodawać budynki, drogi, a nawet ludzi. GauGAN umożliwia także artystom dodawanie filtrów stylu. Takie filtry obejmują m.in. naśladowanie stylu konkretnego artysty czy dostosowanie oświetlenia obrazu ze sceny dziennej do nocnej.

Nie jest jasne, czy GauGAN zostanie kiedykolwiek udostępniony do użytku konsumenckiego, ale oczekuje się, że będzie szczególnie pomocnym narzędziem dla architektów, urbanistów, a nawet twórców gier.

Zalecenia redaktorów

  • Oferta pokojowa Nvidii nie działa
  • Nowe narzędzie Nvidia Guardrails rozwiązuje największy problem z chatbotami AI
  • Nvidia może pracować nad ogromnym procesorem graficznym z czterema gniazdami
  • Jak działa DLSS 3 Nvidii (i dlaczego AMD FSR na razie nie może nadrobić zaległości)
  • Nowe narzędzie AMD porównuje swoje procesory graficzne z procesorami Nvidii, ale jest pewien haczyk

Ulepsz swój styl życiaDigital Trends pomaga czytelnikom śledzić szybko rozwijający się świat technologii dzięki najnowszym wiadomościom, zabawnym recenzjom produktów, wnikliwym artykułom redakcyjnym i jedynym w swoim rodzaju zajawkom.