Robbie Cooper, cofundador de Metapixel, tiene una visión. “Quiero personajes creíbles y completamente animados en un juego o entorno de realidad virtual que reaccionen de una manera totalmente natural. Tener esa sensación de querer extender la mano y tocarlos porque son muy reales. Así debería ser un mundo de realidad virtual”.
No sólo está soñando con ello: él y el Metapíxel El equipo está trabajando para hacerlo posible. Utilizando un increíble equipo de cámara y un software personalizado, Metapixel crea avatares sorprendentemente realistas con Funciones fotorrealistas, basadas en imágenes de alta resolución de una persona real, listas para usar en juegos, películas y más allá de. Visitamos la oficina de Metapixel en Brighton, Reino Unido, para ver la tecnología en acción y crear nuestro propio avatar.
Avatar fotorrealista
El equipo de la cámara parece un portal a otra dimensión; un solo clic del obturador es todo lo que necesitas para viajar a través de galaxias o a través del tiempo. hay 102
Cámaras Nikon D810 montado en él, todos equipados con uno de tres lentes diferentes: un zoom de 50 mm, 85 mm o 72-300 mm.Relacionado
- Utilicé una aplicación para crear modelos 3D con mi iPhone y es sorprendentemente genial.
- Un sistema de impresión 3D puede crear manos biónicas personalizadas en menos de 10 horas
- Los selfies se vuelven 3D con el nuevo modo de cámara de Snapchat que responde al movimiento
Por supuesto, no hay zapping de galaxias, pero una vez que se abre el obturador, cada cámara toma una imagen del sujeto en formato RAW de 36 megapíxeles desde casi todos los ángulos imaginables. Luego, esas tomas se transfieren al sistema informático de Metapixel, donde se procesan en cuestión de segundos. En el transcurso de la siguiente hora aproximadamente, el software crea un increíble avatar fotorrealista en la pantalla, que luce exactamente igual al sujeto. En realidad es una técnica llamada fotogrametría, donde las fotografías tomadas desde diferentes puntos de vista se unen para formar una única representación de 360 grados similar a un escaneo corporal en 3D.
Y cuando digo exactamente igual al tema, lo digo en serio. El resultado es asombroso. Para probarlo, me invitaron a pararme en medio de la plataforma e inmortalizar mi imagen para siempre. Probablemente sea la primera y única vez que 102 cámaras apuntarán en mi dirección al mismo tiempo. Me dijeron que mirara fijamente a un solo punto y me mantuviera completamente quieto, con los brazos ligeramente extendidos. De manera incómoda, esperé mientras se preparaban las cámaras; luego, un flash me cegó mientras mi foto fue tomada.
Cuanto más realista se vea y actúe el avatar, más involucrado estarás con lo que está sucediendo.
Cada imagen se revisa cuidadosamente para detectar errores, luces extrañas y sombras (que pueden confundir a la computadora y arruinar la imagen final), y para detectar imágenes faltantes en las que, por alguna razón, una cámara falló. El propio software de Metapixel, llamado Capturing Reality, hace todo el trabajo pesado. Reúne cada foto y mapea la imagen en una malla, creando el avatar final. Tomó de 10 a 15 minutos construir la primera etapa, luego otros 20 para agregar la textura y el color.
Terminas con la imagen que ves aquí, un avatar tan real que da miedo. También se considera sólo de calidad "normal". Hay otras etapas que aumentan aún más el nivel de detalle. Todo el proceso tomó menos de una hora, incluida toda la configuración de la cámara y el procesamiento.
Las posibilidades
¿Qué se puede hacer con tu avatar perfecto? Hay muchísimas posibilidades interesantes, pero para Cooper, todo se trata de realidad virtual. "Combine esto con una inteligencia artificial realmente buena y el mundo se volverá real", dijo. Por ejemplo, a medida que la IA mejora, me dijo, los avatares podrían entender dónde estás “mirando” en un juego de realidad virtual y responder en consecuencia. Cuanto más realista se vea y actúe el avatar, más involucrado estarás con lo que está sucediendo.
Destacó el trabajo de estudio de animación 3Lateral, donde mediante el uso de tecnología de seguimiento facial, avatares fotorrealistas reflejan las expresiones faciales y reacciones de un actor, como prueba de lo que ya se está trabajando. Para encontrarse cara a cara con lo que es casi una persona viva que respira en un juego o entorno de realidad virtual tiene el potencial de cambiar la forma en que interactuamos y empatizamos con los personajes del juego.
También hay un potencial apasionante en las películas. Un actor analizado de esta manera se vuelve esencialmente inmortal. Imagine que los actores continúan trabajando incluso después de su muerte, o solicitan un escaneo de hace años para representar una escena en en el que el actor debe parecer más joven; todo esto es posible con una imagen idéntica reproducida digitalmente. avatar. Va un paso más allá de la animación 3D y puede utilizar las técnicas que se ven en la captura de movimiento.
Combine el escaneo con una impresora 3D y de repente también obtendrá figuras de acción absolutamente perfectas. Lleve la tecnología a museos y entornos de enseñanza y volverá a la visión de Cooper de los personajes en los que cree. Es posible que algún día veas y escuches a un personaje histórico contar la historia de sus vidas, con verdadera emoción registrada en un rostro que parece ser completamente humano. Es algo emocionante y las posibilidades siguen apareciendo cuanto más lo piensas.
Casi realidad
Todavía estamos a un tiempo de ver todo esto en realidad. Metapixel ha recorrido un largo camino muy rápidamente; La compañía no construyó su primer equipo de cámara, con 30 cámaras en ese momento, hasta finales de 2015. Si bien se ha expandido, todavía se está trabajando en el software personalizado y próximamente habrá actualizaciones para hacer que el proceso de toma de fotografías sea más eficiente. Además, la realidad virtual en sí misma, la tecnología clave para Metapixel, aún está en su infancia.
Metapixel está llamando mucho la atención para una empresa tan joven y está trabajando con una producción cinematográfica. empresa, desarrolladores de realidad virtual e incluso organizadores de conferencias para proporcionar escaneos personales de cuerpo completo en una memoria USB a todos Participantes. Imagínese tener la oportunidad de utilizar ese avatar en una conferencia celebrada en realidad virtual en el futuro. Los resultados son impresionantes y emocionantes para lo que realmente es una tecnología en etapa inicial. No podemos esperar a verlo evolucionar.
Recomendaciones de los editores
- Este monitor 8K tiene tecnología 3D que se puede ver desde todos los ángulos
- Los nuevos auriculares Model One de VZR brindan sonido 3D con calidad de audiófilo a los jugadores
- Los garabatos se convierten en arte de realidad aumentada con la nueva herramienta de pintura 3D de Snapchat
- ¿No puedes permitirte este cabezal de trípode de $150? Simplemente imprima en 3D el Edelkrone Ortak FlexTilt
- Ikea crea una línea de accesorios de accesibilidad impresos en 3D para jugadores