A pesquisa da Sony sobre rastreamento ocular para videogames é incrível

Sonys pesquisa videogames com rastreamento ocular absolutamente incríveis sony playstation magic labs

Embora a Sony tenha conseguido receber mais do que algumas exclamações impressionadas da imprensa, fãs e membros da comunidade de jogos com seu novo fone de ouvido de realidade virtual codinome “Projeto Morpheus”, uma de suas peças de hardware mais incríveis passou despercebida em uma sala dos fundos e não tinha nada a ver com realidade virtual.

A tecnologia em questão é um protótipo de hardware sem nome que pode ou não chegar ao varejo, mas deveria – literalmente oferece uma nova maneira de ver os jogos. Usando uma câmera especialmente projetada, uma das equipes de pesquisa e desenvolvimento da Sony (o grupo conhecido como Magic Labs) descobriu uma maneira de controlar a câmera em um jogo com os olhos. Não é algo que muda a natureza dos jogos da mesma forma que a realidade virtual, mas é uma das peças de tecnologia de jogos mais legais em exibição na GDC.

Vídeos recomendados

A tecnologia de rastreamento ocular ainda está muito longe de ser lançada – e não há garantia de que algum dia será – mas o potencial é incrível. O rastreamento ocular está se tornando um recurso comum em smartphones, mas a escala do dispositivo da Sony eclipsa tudo o que um smartphone oferece atualmente. Na demo em exibição, as ferramentas de rastreamento ocular da Sony (que, novamente, não têm nome tecnicamente no momento) foram usadas em conjunto com o jogo PlayStation 4.

Segundo filho infame.

Para ajudar as explosões de energia a atingirem seus alvos, basta olhar para o que deseja atingir.

Tudo começa com uma calibração rápida que é tão simples quanto olhar para um ponto no canto superior esquerdo e depois outro no lado diagonalmente oposto. A câmera então começa a enviar dados para um laptop próximo, que por sua vez assume o controle da câmera do jogo.

Leva alguns momentos para se orientar para o novo método de ver. Em um jogo em terceira pessoa, é natural que seus olhos gravitem em direção ao personagem que está abaixo do centro da tela. Com o software de rastreamento ocular, olhar para o seu personagem faz com que a câmera se mova para baixo. Depois de compensar, porém, os efeitos são surpreendentes.

Além da capacidade de olhar ao redor com os olhos da mesma maneira que você normalmente faria com a câmera girando com o botão direito, o rastreamento também pode ser muito mais preciso. Em Infame, tocar rapidamente no botão R2 envia um fluxo de rajadas de energia contra os oponentes, semelhante ao disparo de uma metralhadora, mas com projéteis mais lentos. Para ajudar as explosões de energia a atingirem seus alvos, basta olhar para o que deseja atingir. Se você estiver enfrentando dois inimigos, um de cada lado, basta olhar em uma direção e depois na outra e as rajadas de energia encontrarão seu alvo. Ele registra seus movimentos tão rápido quanto seus olhos se movem, criando uma câmera responsiva que pode alterar para sempre a forma como inserimos visualmente os jogos.

Embora a demo tenha se concentrado no que, para todos os efeitos, é um jogo de tiro em terceira pessoa (pelo menos na demo, que mostrou um jogo inicial seção do jogo onde as explosões de energia estavam entre suas armas mais eficazes), as possibilidades com a tecnologia de rastreamento ocular da Sony são sem fim. Imagine jogar uma partida de futebol e, em vez de tentar passar desajeitadamente para um determinado jogador correndo em um padrão incomum, basta olhar para ele e apertar o botão de passe. No futebol, enquanto controla o quarterback, você pode simplesmente olhar para seus recebedores e acertar o passe para quem deseja. Em jogos de tiro em primeira pessoa, teoricamente você poderia mirar mais rápido do que o movimento do polegar.

Também existem usos possíveis para a tecnologia com o headset de realidade virtual do Projeto Morpheus. Ainda é apenas teórico no momento (até onde sabemos), mas imaginamos que um dia você poderá colocar o VR fone de ouvido e olhe ao redor do mundo virtual movendo a cabeça, mas também olhe ao redor como faria naturalmente, com o seu olhos.

rastreamento ocular sony Magic Labs

 Os efeitos também podem ir além dos jogos. Imagine assistir a uma transmissão em 3D de um jogo de basquete usando um fone de ouvido de realidade virtual. Você poderia olhar ao redor em um campo de visão limitado, mas quando a ação acontecesse, seus olhos comandariam o vídeo onde focar. Se um chute for bloqueado e um contra-ataque começar, é mais natural seguir com os olhos do que virar a cabeça para ver a bola correr pela quadra.

Existem algumas desvantagens, no entanto. Por um lado, é necessária uma nova câmera separada da câmera do PlayStation 4. Dito isto, o dispositivo em exibição era um protótipo puro e sempre poderia haver uma chance de encontrar uma maneira de incorporar câmeras existentes para usar a tecnologia por meio de atualizações de software. Mas se fosse lançado amanhã, você precisaria comprar um novo periférico.

Outra desvantagem mais significativa são os problemas do software com o rastreamento dos olhos por trás dos óculos. É um acerto ou erro se ele reconhece ou não o movimento dos olhos por trás das lentes, e as pessoas que usam óculos terão problemas. Isso poderia eventualmente ser consertado. Mas mesmo se você não estiver usando óculos, precisará sentar-se perto da câmera. Para rastrear o movimento dos olhos, uma câmera precisa estar próxima o suficiente para seguir os movimentos, criando potencialmente um problema estranho de posicionamento. A alternativa seria uma câmera de alta resolução capaz de ampliar o suficiente para distinguir seus olhos à distância. Isso certamente é possível, mas provavelmente custaria mais do que valeria. Ainda assim, todos esses problemas podem ser resolvidos.

A tecnologia de rastreamento ocular da Sony foi mostrado pela primeira vez em novembro de 2013 enquanto o mundo se preparava para a chegada do PlayStation 4. Ele foi destaque como parte do visual da Magic Labs, empresa também responsável por aparelhos como o Move, a Eye Toy Camera e, mais recentemente, o DualShock 4. Na época, o rastreamento ocular era pouco mais que um artifício – um artifício bacana – mas comparado ao lançamento do novo sistema, um protótipo teórico não era o foco principal. Agora que o PlayStation 4 está no mercado, porém, os limites dos jogos estão prontos para serem ultrapassados ​​por dispositivos como este, Projeto Morpheus, e outros que ainda não consideramos (mas provavelmente estão sendo trabalhados em laboratórios ao redor do mundo). mundo).

Com o Projeto Morpheus lançando uma longa sombra, o rastreamento ocular ainda é apenas um espetáculo secundário, especialmente porque não há planos firmes para isso no momento. Dê um tempo, no entanto. Isso pode ser apenas parte do futuro dos jogos.