Програма Nvidia Smart Paintbrush перетворює дудли на фотореалістичні зображення

Фото дослідників Nvidia GauGAN
NVIDIA

Нова програма для малювання, доповнена функціями глибокого навчання, незабаром зможе перетворити ваші прості ескізи та дудли на блискучі та реалістичні витвори мистецтва.

Nvidia нещодавно оголошено розробка GauGAN, розумної програми для малювання, яка використовує a глибоке навчання модель для створення фотореалістичних версій простих малюнків, створених художниками-людьми. Назва програми, GauGAN, відноситься як до французького художника-постімпресіоніста Поля Ґоґена, так і до використання програмою генеративних суперницьких мереж (GAN) для створення реалістичних зображень.

Рекомендовані відео

Отже, як працює GauGAN? Згідно з оголошенням Nvidia, програма схожа на «розумну кисть», яка заповнює деталі вашого малюнка (називається «картою сегментації»). По суті, ви надаєте схему того, що ви хочете, і позначаєте кожен сегмент, диктуючи, що він має бути. З цього моменту GauGAN бере на себе роботу, додаючи додаткові деталі, щоб зробити ваші малюнки більш реалістичними:

Пов'язані

  • Nvidia відмовляється від RTX 4070, звертаючись до більш дешевих варіантів
  • Nvidia може розробити ще один монстр GPU, і ціна може бути зашкалюючою
  • Розробник каже, що він може перетворити ваш AMD 6800 XT на Nvidia 3090 Ti

«Навчена на мільйонах зображень, модель глибокого навчання потім заповнює пейзаж неймовірним ефектом результати: намалюйте ставок, і елементи поблизу, як-от дерева та скелі, відобразяться як відображення в води. Замініть мітку сегмента з «трава» на «сніг», і все зображення зміниться на зимову сцену, коли колишнє листяне дерево стає безплідним».

Перетворення ескізів на фотореалістичні шедеври

GAN, які використовуються в GauGAN, по суті, є партнерством між двома мережами, генератором і дискримінатором. У рамках цього партнерства генератор розробляє ряд можливих зображень і дискримінатор діє як свого роду редактор, який навчає генератора «як покращити реалістичність свого синтетичного зображення».

Варто також зазначити, що GauGAN використовує для створення своїх великих знань про інші зображення ці малюнки, ці малюнки все ще вважаються оригінальними роботами, оскільки програма створює нові зображення.

Нова програма для малювання від Nvidia не обмежується лише природними сценами чи пейзажами – вона також може додавати будівлі, дороги чи навіть людей. GauGAN також дозволяє художникам додавати фільтри стилю. Такі фільтри включають імітацію стилю певного художника або налаштування освітлення зображення з денної сцени на нічну.

Незрозуміло, чи буде GauGAN коли-небудь випущений для споживчого використання, але очікується, що він стане особливо корисним інструментом для архітекторів, містобудівників і навіть розробників ігор.

Рекомендації редакції

  • Мирна пропозиція Nvidia не працює
  • Новий інструмент Guardrails від Nvidia вирішує найбільшу проблему з чат-ботами ШІ
  • Nvidia може працювати над величезним графічним процесором із чотирма слотами
  • Як працює Nvidia DLSS 3 (і чому AMD FSR зараз не може наздогнати)
  • Новий інструмент AMD порівнює її графічні процесори з Nvidia, але є підступ

Оновіть свій спосіб життяDigital Trends допомагає читачам стежити за динамічним світом технологій завдяки всім останнім новинам, цікавим оглядам продуктів, проникливим редакційним статтям і унікальним у своєму роді коротким оглядам.