IA da Nvidia e Ray Tracing faz selfies de vídeo Moonwalk na Lua

Além de lançar 10 novos laptops RTX Studio direcionados aos criadores da SIGGRAPH, a Nvidia também anunciou alguns dos trabalhos que suas equipes de pesquisa têm feito nas áreas de inteligência artificial, realidade aumentada e computação gráficos. No 50º aniversário do pouso lunar da Apollo 11, a Nvidia apresentou como a tecnologia de rastreamento de raios de sua placa gráfica RTX é usada para melhorar visualmente as imagens capturado pela NASA há 50 anos. Na SIGGRAPH, o esforço da Nvidia para comemorar a Apollo 11 vai um passo além, permitindo aos fãs do espaço a oportunidade de se sobreporem em um pequeno videoclipe, como se fossem os astronautas Neil Armstrong e Buzz Aldrin, usando IA. e o poder do ray tracing para renderizar esses vídeos em tempo real.

“O que estamos fazendo é usar inteligência artificial para apontar uma câmera e pessoas apenas com roupas normais, para poder fazer uma estimativa de pose 3D”, explicou Rob Estes, da Nvidia TKTK. “Sabemos onde eles estão no espaço 3D e como seus membros se movem, então estamos desenhando isso usando

Fazendo o moonwalk na caminhada da lua

Os diretores de efeitos visuais de Hollywood vêm fazendo algo semelhante há anos, usando uma tela verde e atores de captura de movimento vestindo ternos com pontos para replicar o movimento dos membros, mas traçado de raio e IA dar um passo adiante, eliminando a necessidade de equipamentos especializados e atores. “Você poderia fazer isso em qualquer lugar onde pudesse filmar alguém”, Estes elaborou sobre os benefícios da IA ​​habilitada rastreamento de raios neste exemplo lunar. Essencialmente, os participantes do SIGGRAPH podem filmar uma pequena montagem em vídeo deles mesmos no traje espacial de Aldrin e Armstrong fazendo o moonwalk como se estivessem na lua como parte da missão Apollo 11.

“Teremos um modelo da superfície lunar e do módulo lunar, e vamos deixá-los ver o que é. seria como se eles estivessem na lua.”, disse ele, com todos os efeitos de iluminação e renderização realizados em tempo real. “Esta é uma pesquisa de ponta e ninguém fez isso antes. Você está penteando A.I. e traçado de raios de uma forma que traz muitos, muitos benefícios práticos.” Esses benefícios não só ajudam Hollywood e suas equipes de efeitos visuais, mas também designers e pesquisadores que tentam resolver problemas difíceis com estimativas de pesquisa, a Nvidia expandido.

Renderização foveada com óculos graduados

A Nvidia deseja fazer com que a renderização para aplicativos de realidade aumentada e virtual pareça mais realista e nítida, e está aplicando sua famosa tecnologia de renderização para conseguir isso. O que a equipe de pesquisadores da Nvidia fez foi adicionar suporte para lentes de prescrição, uma novidade na indústria. Embora isso ainda esteja no estágio inicial de pesquisa, a Nvidia prevê um dia em que os usuários de óculos graduados não precisarão usar óculos separados de seus dispositivos de realidade aumentada.

A Nvidia está trabalhando com vários tipos de tela para poder construir uma tela VR ou AR congruente com os óculos graduados que você possa ter. “Isso é um grande negócio”, disse Estes. “Você nunca foi capaz de ver 20/20 antes porque simplesmente não havia acuidade visual para essas exibições.”

Da mesma forma que o ray tracing pode trazer efeitos cinematográficos realistas aos videogames, foveu a renderização pode fazer com que as cenas e imagens AR pareçam mais realistas com melhor resolução, conservando poder gráfico. Em vez de renderizar a cena inteira, a renderização desejada permite que os criadores renderizem apenas a parte central da cena em alta resolução. fidelidade, que é onde seus olhos normalmente focam, e as áreas periféricas podem ser renderizadas com menos detalhes para economizar na GPU poder.

“Portanto, estamos trabalhando para garantir que estamos rastreando onde está o seu jogo e aplicando isso para que você fique mais rápido. taxas de quadros e melhores gráficos na realidade aumentada, ou isso também pode ser aplicado à realidade virtual”, disse Estes.

GauGAN, o I.A. artista, é libertado

No passado, a Nvidia mostrou como seu GauGAN A ferramenta de desenho pode transformar até mesmo os que têm desafios artísticos entre nós em artistas, permitindo que você desenhe complexos, paisagens da vida-vida com apenas alguns traços simples, aproveitando o poder do artificial inteligência. As cenas desenhadas por IA, revelou a Nvidia, também foram usadas em alguns filmes de renome de Hollywood como pano de fundo, com os estúdios sobrepondo elementos que queriam para definir o clima geral do clipe.

Em vez de usar IA. para identificar elementos de uma cena, como um cachorro ou um gato, o GauGAN, como o próprio nome indica, usa uma rede adversária generativa, ou GAN. Ao especificar onde está o céu desenhando uma linha do horizonte e onde o oceano encontra o céu, GauGAN começa a “desenhar” a cena com nuvens e ondas, e o usuário pode adicionar rochas e falésias a esta paisagem marítima, renderizando a cena com sombras e imagens adequadas. reflexões. Portanto, em vez de identificar objetos em uma imagem, o GAN ajuda a preencher a imagem com uma criação e renderização realista da cena, explicou a Nvidia.

Dada a popularidade da ferramenta, a Nvidia revelou que irá expandir o acesso ao GauGAN para todos. Neste momento, Estes disse que não há planos para monetizar o GauGAN, apesar de seu trabalho criativo no indústria cinematográfica, e que a empresa está simplesmente saboreando a alegria que outras pessoas obtêm usando isso.

Recomendações dos Editores

• Nvidia estreia Portal: Prelude RTX, e você pode jogá-lo de graça
• 5 recursos incríveis de IA no Photoshop que você pode usar agora
• O supercomputador da Nvidia pode trazer uma nova era de ChatGPT
• 3 razões pelas quais você ainda deve comprar uma GPU Nvidia em vez de AMD
• Se você possui uma placa gráfica Nvidia, sua CPU pode estar sofrendo agora

Atualize seu estilo de vidaDigital Trends ajuda os leitores a manter o controle sobre o mundo acelerado da tecnologia com as últimas notícias, análises divertidas de produtos, editoriais criteriosos e prévias únicas.