Robbie Cooper, cofundador da Metapixel, tem uma visão. “Quero personagens totalmente animados e verossímeis em um jogo ou ambiente de VR que reajam de maneira totalmente natural. Ter aquela sensação de querer alcançá-los e tocá-los porque são tão reais. É assim que um mundo VR deveria ser.”
Ele não está apenas sonhando com isso: ele e o Metapixel equipe está realmente trabalhando para tornar isso possível. Usando um equipamento de câmera incrível e algum software personalizado, Metapixel cria avatares surpreendentemente realistas com recursos fotorrealistas, baseados em imagens de alta resolução de uma pessoa real, prontos para uso em jogos, filmes e além. Visitamos o escritório da Metapixel em Brighton, Reino Unido, para ver a tecnologia em ação e criar nosso próprio avatar.
Avatar foto-real
O equipamento da câmera parece um portal para outra dimensão; basta um único clique no obturador para transportá-lo pelas galáxias ou pelo tempo. Existem 102 Câmeras Nikon D810 montado nele, todos equipados com uma das três lentes diferentes – zoom de 50 mm, 85 mm ou 72-300 mm.
Relacionado
- Usei um aplicativo para criar modelos 3D com meu iPhone e é surpreendentemente ótimo
- Sistema de impressão 3D pode cuspir mãos biônicas personalizadas em menos de 10 horas
- As selfies acabaram de se tornar 3D com o novo modo de câmera do Snapchat que responde ao movimento
Não há nenhum zapping de galáxia envolvido, é claro, mas uma vez que o obturador é liberado, cada câmera tira uma foto do assunto em formato RAW de 36 megapixels de quase todos os ângulos concebíveis. Essas fotos são então transferidas para o sistema de computador do Metapixel, onde são processadas em questão de segundos. Ao longo da próxima hora, o software cria um incrível avatar foto-real na tela, exatamente igual ao sujeito. Na verdade, é uma técnica chamada fotogrametria, onde fotos tiradas de diferentes pontos de vista são unidas para formar uma única renderização de 360 graus, semelhante a uma digitalização corporal em 3D.
E quando digo exatamente como o assunto, estou falando sério. O resultado é estranho. Para testar, fui convidado a ficar no meio da plataforma e ter minha imagem imortalizada para sempre. É provável que seja a primeira e única vez que 102 câmeras serão apontadas na minha direção ao mesmo tempo. Disse para olhar para um único ponto e ficar completamente imóvel, com os braços ligeiramente estendidos. maneira desconfortável, esperei enquanto as câmeras eram preparadas - então fui cegado por um flash quando minha foto foi pego.
Quanto mais realista o avatar parecer e agir, mais você estará envolvido com o que está acontecendo.
Cada imagem é cuidadosamente verificada quanto a erros, iluminação estranha e sombras (que podem confundir o computador e arruinar a imagem final) e quanto a quaisquer imagens faltantes em que a câmera, por algum motivo, falhou. O próprio software da Metapixel, chamado Capturing Reality, faz todo o trabalho pesado. Ele reúne cada foto e mapeia a imagem em uma malha, construindo o avatar final. Demorou de 10 a 15 minutos para construir o primeiro estágio, depois mais 20 para adicionar a textura e a cor.
Você acaba com a imagem vista aqui, um avatar tão real que chega a ser assustador. Também é considerada apenas qualidade “normal”. Existem outras etapas, que aumentam ainda mais o nível de detalhe. Todo o processo levou menos de uma hora, incluindo toda a configuração e processamento da câmera.
As possibilidades
O que pode ser feito com seu avatar perfeito? Existem inúmeras possibilidades interessantes, mas para Cooper, tudo gira em torno da realidade virtual. “Combine isso com uma inteligência artificial realmente boa e o mundo se tornará real”, disse ele. Por exemplo, à medida que a IA melhora, ele me disse, os avatares podem entender para onde você está “olhando” em um jogo de RV e responder de acordo. Quanto mais realista o avatar parecer e agir, mais você estará envolvido com o que está acontecendo.
Ele destacou o trabalho de estúdio de animação 3Lateral, onde, usando tecnologia de rastreamento facial, avatares fotorrealistas espelham as expressões faciais e reações de um ator, como prova do que já está sendo trabalhado. Para ficar cara a cara com o que é quase uma pessoa que vive e respira em um jogo ou ambiente de RV tem o potencial de mudar a maneira como interagimos e temos empatia com os personagens do jogo.
Também há um potencial emocionante nos filmes. Um ator escaneado dessa forma torna-se essencialmente imortal. Imagine atores continuando a trabalhar mesmo depois de sua morte, ou acessando uma varredura de anos atrás para representar uma cena em que o ator deve parecer mais jovem - tudo isso é possível com um filme reproduzido digitalmente e de aparência idêntica avatar. Ele vai um passo além da animação 3D e pode usar as técnicas vistas na captura de movimento.
Combine a digitalização com uma impressora 3D e de repente você também terá figuras de ação com aparência absolutamente perfeita. Leve a tecnologia para museus e ambientes de ensino e você retornará à visão de Cooper sobre personagens em que acredita. Um dia você poderá ver e ouvir uma pessoa histórica contar a história de suas vidas, com a verdadeira emoção registrada em um rosto que parece ser completamente humano. É algo emocionante, e as possibilidades continuam surgindo quanto mais você pensa sobre isso.
Quase realidade
Ainda estamos um pouco longe de ver tudo isso na realidade. O Metapixel percorreu um longo caminho muito rapidamente; a empresa só construiu seu primeiro equipamento de câmeras, com 30 câmeras na época, no final de 2015. Embora tenha se expandido, o software personalizado ainda está sendo trabalhado e em breve haverá atualizações para tornar o processo de tirar fotos mais eficiente. Além disso, a própria VR – a principal tecnologia motriz do Metapixel – ainda está em sua infância.
A Metapixel está atraindo muita atenção para uma empresa tão jovem e está trabalhando com uma produção cinematográfica empresa, desenvolvedores de VR e até mesmo organizadores de conferências para fornecer digitalizações pessoais de corpo inteiro em um pendrive para todos participantes. Imagine ter a oportunidade de usar esse avatar em uma conferência realizada em realidade virtual no futuro. Os resultados são impressionantes e empolgantes para o que é realmente uma tecnologia em estágio inicial. Mal podemos esperar para ver isso evoluir.
Recomendações dos Editores
- Este monitor 8K possui tecnologia 3D que pode ser visualizada de todos os ângulos
- Os novos fones de ouvido Modelo One da VZR trazem som 3D com qualidade audiófila para os jogadores
- Doodles se tornam arte de realidade aumentada com a nova ferramenta 3D Paint do Snapchat
- Não pode pagar esta cabeça de tripé de $ 150? Basta imprimir em 3D o Edelkrone Ortak FlexTilt
- Ikea cria linha de acessórios de acessibilidade impressos em 3D para jogadores
