En la Conferencia sobre Procesamiento de Información Neural en Montreal, Canadá, los investigadores de Nvidia demostraron que podría utilizar el poder de la inteligencia artificial para representar escenas sintéticas, pero realistas, con detalles y texturas. Los investigadores afirman que el trabajo aún se encuentra en sus primeras etapas y no está claro cuándo se lanzará la tecnología. lanzado a los consumidores, pero existe un gran potencial para el renderizado impulsado por inteligencia artificial de Nvidia en el futuro. espacio de juego.
"Este trabajo trata sobre una nueva forma de renderizar gráficos por computadora utilizando redes neuronales", dijo el vicepresidente de aprendizaje profundo aplicado de Nvidia, Bryan Catanzaro, en una conferencia telefónica. Básicamente, los investigadores querían saber cómo podían aplicar la IA. para mejorar los gráficos por computadora, y la solución es aplicar el aprendizaje automático a videos del mundo real para generar nuevos gráficos.
Vídeos recomendados
"Hemos construido un sistema que toma representaciones de alto nivel del mundo físico; básicamente toma un boceto en video y lo convierte en una escena renderizada", dijo Catanzaro. “El modelo comprende información de alto nivel de los objetos del mundo real y luego los elabora para agregar información de textura e iluminación. El objetivo es poder sintetizar nuevas escenas con gráficos”.
El aprendizaje automático se utiliza para analizar videos existentes y Nvidia aplicaría técnicas de visión por computadora para agregar etiquetas a los objetos y sus propiedades. Esto significa que la A.I. Sería capaz de reconocer un paisaje urbano y comprender qué objetos son árboles, coches o edificios, por ejemplo.
Esta tecnología se deriva de investigaciones existentes, como la de la Universidad de California, Berkeley, según Nvidia. La compañía ha mostrado otras técnicas de renderizado basadas en IA en el pasado, incluida una que eliminar ruido de una imagen.
Los investigadores pudieron lograr renderizado en tiempo real en una GPU Tensor Core, pero para la conferencia, Nvidia demostró la tecnología en su tarjeta Titan V. “Aunque puedes hacer esto en cualquier procesador, el aspecto en tiempo real requiere mucha IA. rendimiento”, explicó Catanzaro, señalando que la GPU Tensor Core es importante.
Al poder crear contenido y agregarlo a mundos virtuales, el mercado de los juegos podría beneficiarse enormemente del trabajo creado por esta investigación. Los desarrolladores, por ejemplo, podrían “remasterizar” juegos antiguos reproduciendo títulos antiguos para agregarles imágenes de alta definición, o podrían agregar nuevos niveles a juegos existentes con poco esfuerzo.
Como ejemplo básico de cómo funcionaría esto, los usuarios pueden tomar un video de ellos mismos, subirlo a un juego y la renderización permitirá crear avatares altamente personalizados para usar en el juego. Nvidia ha abierto el código de su investigación en este momento, pero Catanzaro advierte que los primeros trabajos en este campo son más adecuados para científicos informáticos que para desarrolladores de juegos.
En una demostración separada, Nvidia demostró que podía analizar movimientos de baile, como los del popular video musical. estilo Gangnam – y transferir esos movimientos a otra persona utilizando las mismas técnicas de visión por computadora. "Analizamos el código de la persona y eso se convierte en nuestro boceto", dijo Catanzaro. "Y el modelo representa a la persona objetivo dado ese boceto".
Nvidia advierte que esta es todavía una tecnología en etapa inicial, pero también puedes actualizar los gráficos desde un juego existente y entrenar un modelo con imágenes del mundo real para volver a renderizar juegos antiguos y hacerlos lucir mejor. Debido a que la tecnología requiere que la computadora analice objetos conocidos en el mundo real, Catanzaro advierte que no funcionará en cosas fantásticas, como representar a los elfos de Santa. En teoría, admite, puedes entrenar a la computadora para que represente elfos, pero necesitas crear elfos físicos y capturar imágenes para que la computadora aprenda.
Como el trazado de rayos tecnología que se introdujo en la reciente serie RTX de Nvidia tarjetas graficas Para los consumidores, la compañía dijo que este renderizado basado en IA se utiliza de forma híbrida y no pretende reemplazar las técnicas de renderizado tradicionales. En cambio, el renderizado basado en inteligencia artificial está destinado a coexistir y usarse con motores de renderizado de gráficos tradicionales.
En este momento, no está claro cuándo llegará esta tecnología al mercado de los juegos. Podría llevar tan solo un par de años, especuló Catanzaro con optimismo. Combinado con trazado de rayos, la representación de escenas basada en inteligencia artificial ofrecerá imágenes de calidad en títulos de juegos renderizados en tiempo real.
Recomendaciones de los editores
- Probé la nueva función RTX de Nvidia y solucionó la peor parte de los juegos de PC
- Los principales autores exigen un pago a las empresas de inteligencia artificial por utilizar su trabajo
- Wix usa ChatGPT para ayudarte a crear rápidamente un sitio web completo
- Esta misteriosa GPU Nvidia es una monstruosidad absoluta, y acabamos de echarle otro vistazo
- Después de todo, es posible que la RTX 4060 de Nvidia no sea tan decepcionante
Mejora tu estilo de vidaDigital Trends ayuda a los lectores a mantenerse al tanto del vertiginoso mundo de la tecnología con las últimas noticias, reseñas divertidas de productos, editoriales interesantes y adelantos únicos.