Приложението Nvidia Smart Paintbrush превръща драскулките във фотореалистични изображения

Снимка на изследователите на Nvidia GauGAN
NVIDIA

Ново приложение за рисуване, подобрено с функции за дълбоко обучение, скоро може да превърне вашите прости скици и драскулки в брилянтни и реалистични произведения на изкуството.

Nvidia наскоро обявен разработването на GauGAN, интелигентно приложение за рисуване, което използва a дълбоко обучение модел за генериране на фотореалистични версии на прости рисунки, създадени от човешки художници. Името на приложението, GauGAN, се отнася както за френския художник пост-импресионист Пол Гоген, така и за използването на генеративните състезателни мрежи (GAN) от приложението за разработване на реалистични изображения.

Препоръчани видеоклипове

И така, как работи GauGAN? Според съобщението на Nvidia, приложението е като „умна четка за рисуване“, която попълва детайлите на вашата рисунка (наричана „карта на сегментиране“). По същество вие предоставяте очертанията на това, което искате, и етикетирате всеки сегмент, диктувайки какво трябва да бъде. Оттам нататък GauGAN поема, попълвайки допълнителните детайли, за да направи вашите рисунки по-реалистични:

Свързани

  • Nvidia се отказва от RTX 4070, като се насочва към по-евтини опции
  • Nvidia може да има друг чудовищен графичен процесор в процес на разработка, а цената може да е скандална
  • Разработчикът казва, че може да превърне вашия AMD 6800 XT в Nvidia 3090 Ti

„Обучен върху милиони изображения, моделът на задълбочено обучение след това изпълва пейзажа със зашеметяващ ефект резултати: Начертайте езерце и близките елементи като дървета и скали ще се появят като отражения в вода. Разменете етикета на сегмент от „трева“ на „сняг“ и цялото изображение се променя на зимна сцена, с предишно листно дърво, което става безплодно.“

Промяна на скиците във фотореалистични шедьоври

GAN, използвани в GauGAN, са по същество партньорство между две мрежи, генератор и дискриминатор. В рамките на това партньорство генераторът разработва поредица от възможни изображения и дискриминатора действа като вид редактор, който учи генератора „как да подобри реализма на своя синтетичен изображения.”

Също така си струва да се отбележи, че докато GauGAN използва обширните си познания за други изображения, за да създава тези рисунки, тези рисунки все още се считат за оригинални произведения, тъй като приложението генерира нови изображения.

Новото приложение за рисуване на Nvidia не е ограничено само до природни сцени или пейзажи – то може също да добавя сгради, пътища или дори хора. GauGAN също позволява на артистите да добавят стилови филтри. Такива филтри включват имитиране на конкретен стил на художник или регулиране на осветлението на изображението от дневна към нощна сцена.

Не е ясно дали GauGAN някога ще бъде пуснат за потребителска употреба, но се очаква да бъде особено полезен инструмент за архитекти, градоустройствени плановици и дори разработчици на игри.

Препоръки на редакторите

  • Мирното предложение на Nvidia не работи
  • Новият инструмент Guardrails на Nvidia коригира най-големия проблем с AI чатботовете
  • Nvidia може да работи върху огромен графичен процесор с четири слота
  • Как работи DLSS 3 на Nvidia (и защо AMD FSR не може да навакса засега)
  • Новият инструмент на AMD сравнява своите GPU с тези на Nvidia, но има уловка

Надградете начина си на животDigital Trends помага на читателите да следят забързания свят на технологиите с всички най-нови новини, забавни ревюта на продукти, проницателни редакционни статии и единствени по рода си кратки погледи.