O aplicativo Nvidia Smart Paintbrush transforma rabiscos em imagens fotorrealistas

Foto dos pesquisadores da Nvidia GauGAN
NVIDIA

Um novo aplicativo de desenho aprimorado com funções de aprendizado profundo poderá em breve converter seus esboços e rabiscos simples em obras de arte brilhantes e realistas.

Nvidia anunciado recentemente o desenvolvimento do GauGAN, um aplicativo de desenho inteligente que usa um aprendizagem profunda modelo para gerar versões fotorrealistas de desenhos simples criados por artistas humanos. O nome do aplicativo, GauGAN, refere-se ao pintor pós-impressionista francês Paul Gauguin e ao uso que o aplicativo faz das redes generativas adversárias (GANs) para desenvolver suas imagens realistas.

Vídeos recomendados

Então, como funciona o GauGAN? De acordo com o anúncio da Nvidia, o aplicativo é como um “pincel inteligente” que preenche os detalhes do seu desenho (chamado de “mapa de segmentação”). Essencialmente, você fornece o esboço do que deseja e rotula cada segmento, ditando o que deveria ser. A partir daí, GauGAN assume o controle, preenchendo os detalhes extras para tornar seus desenhos mais realistas:

Relacionado

  • Nvidia abandona o RTX 4070 enquanto se volta para opções mais baratas
  • A Nvidia pode ter outra GPU monstruosa em desenvolvimento, e o preço pode ser exorbitante
  • Desenvolvedor diz que pode transformar seu AMD 6800 XT em uma Nvidia 3090 Ti

“Treinado em um milhão de imagens, o modelo de aprendizagem profunda preenche a paisagem com imagens impressionantes resultados: desenhe um lago e elementos próximos, como árvores e pedras, aparecerão como reflexos no água. Troque o rótulo de um segmento de “grama” para “neve” e toda a imagem muda para uma cena de inverno, com uma árvore anteriormente frondosa ficando estéril.”

Transformando esboços em obras-primas fotorrealistas

Os GANs utilizados no GauGAN são essencialmente uma parceria entre duas redes, um gerador e um discriminador. Dentro desta parceria, um gerador desenvolve uma série de imagens possíveis e o discriminador atua como uma espécie de editor que ensina ao gerador “como melhorar o realismo de sua síntese imagens.”

Também é importante notar que, embora GauGAN use seu amplo conhecimento de outras imagens para criar esses desenhos, esses desenhos ainda são considerados trabalhos originais, pois o aplicativo está gerando novos imagens.

O novo aplicativo de desenho da Nvidia não se limita apenas a cenas da natureza ou paisagens – ele também pode adicionar edifícios, estradas ou até mesmo pessoas. GauGAN também permite que artistas adicionem filtros de estilo. Esses filtros incluem a imitação do estilo de um artista específico ou o ajuste da iluminação da imagem de uma cena diurna para uma cena noturna.

Não está claro se o GauGAN será lançado para uso do consumidor, mas espera-se que seja uma ferramenta particularmente útil para arquitetos, planejadores urbanos e até mesmo desenvolvedores de jogos.

Recomendações dos Editores

  • A oferta de paz da Nvidia não está funcionando
  • A nova ferramenta Guardrails da Nvidia corrige o maior problema com chatbots de IA
  • Nvidia pode estar trabalhando em uma enorme GPU de quatro slots
  • Como funciona o DLSS 3 da Nvidia (e por que o AMD FSR não consegue alcançá-lo por enquanto)
  • A nova ferramenta da AMD compara suas GPUs com as da Nvidia, mas há um problema

Atualize seu estilo de vidaDigital Trends ajuda os leitores a manter o controle sobre o mundo acelerado da tecnologia com as últimas notícias, análises divertidas de produtos, editoriais criteriosos e prévias únicas.