Sonys forskning på øyesporing for videospill er fantastisk

sonys research eye tracking videospill helt fantastiske sony playstation magic labs

Mens Sony klarte å tjene mer enn noen få imponerte utrop fra presse, fans og medlemmer av spillfellesskapet med sin nye virtual reality-headset koden kalt "Project Morpheus", en av dens mer utrolige maskinvare satt ubemerket i et bakrom og hadde ingenting med virtuell virkelighet å gjøre.

Den aktuelle teknologien er et stykke ikke navngitt prototypemaskinvare som kanskje eller kanskje aldri kommer til detaljhandelen, men det burde det – det gir bokstavelig talt en ny måte å se på spill. Ved hjelp av et spesialdesignet kamera har et av Sonys forsknings- og utviklingsteam (gruppen kjent som Magic Labs) kommet opp med en måte for deg å kontrollere kameraet i et spill med øynene dine. Det er ikke noe som endrer naturen til spill på samme måte som virtuell virkelighet gjør, men det er en av de kuleste delene av spillteknologi som vises på GDC.

Anbefalte videoer

Øyesporingsteknologien er fortsatt en lang vei fra å bli utgitt – og det er ingen garanti for at den noen gang vil bli det – men potensialet er utrolig. Øyesporing er i ferd med å bli en vanlig funksjon for smarttelefoner, men omfanget til Sonys enhet overskygger alt en smarttelefon tilbyr for øyeblikket. I demoen som vises ble Sonys øyesporingsverktøy (som igjen teknisk sett ikke har et navn for øyeblikket) brukt i forbindelse med PlayStation 4-spillet

Beryktet: Andre sønn.

For å hjelpe energieksplosjonene med å nå sine mål, ser du ganske enkelt på hva du vil treffe.

Det hele starter med en rask kalibrering som er så enkel som å se på en prikk i øvre venstre hjørne og deretter en annen på diagonalt motsatt side. Kameraet begynner deretter å sende data til en bærbar datamaskin i nærheten, som igjen tar over for spillets kamera.

Det tar noen få øyeblikk å orientere seg mot den nye metoden for å se. I et tredjepersonsspill er det naturlig for øynene dine å trekke til karakteren din som er under midten av skjermen. Med øyesporingsprogramvaren får derfor kameraet til å panorere nedover å se på karakteren din. Når du først har kompensert, er effektene fantastiske.

Utover muligheten til å se seg rundt med øynene på samme måte som du vanligvis ville panorert kameraet rundt med den riktige thumbstick, kan sporingen også være langt mer presis. I Beryktet, å trykke raskt på R2-knappen sender en strøm av energieksplosjoner mot motstandere som ligner på å avfyre ​​et maskingevær, men med langsommere prosjektiler. For å hjelpe energieksplosjonene med å nå sine mål, ser du ganske enkelt på hva du vil treffe. Hvis du står overfor to fiender, en på hver side av deg, bare se en retning, så vil den andre og energieksplosjonene finne sitt preg. Den registrerer bevegelsene dine like raskt som øynene dine beveger seg, og skaper et responsivt kamera som kan endre måten vi visuelt legger inn spill for alltid.

Mens demoen fokuserte på det som for all del er et tredjepersons skytespill (i hvert fall i demoen, som viste en tidlig delen av spillet hvor energieksplosjoner var blant de mest effektive våpnene dine), er mulighetene med Sonys eye-tracking-teknologi endeløs. Tenk deg å spille en fotballkamp, ​​og i stedet for å prøve å sende til en bestemt spiller som løper i et uvanlig mønster, ser du bare på dem og trykker på pass-knappen. I fotball, mens du kontrollerer quarterbacken, kan du ganske enkelt se på mottakerne og trykke pass til den du vil ha. I førstepersons skytespill kan du teoretisk sikte raskere enn tommelen kan bevege seg.

Det er også mulige bruksområder for teknologien med Project Morpheus virtual reality-headset. Det er fortsatt bare teoretisk akkurat nå (så vidt vi vet), men vi forestiller oss at du kanskje en dag kan sette på deg VR headset og se deg rundt i den virtuelle verdenen ved å bevege hodet, men også se deg rundt som du naturlig ville gjort, med din øyne.

Sony Eye Tracking Magic Labs

 Effektene kan også gå utover spilling. Tenk deg å se en 3D-sending av en basketballkamp med et virtual reality-headset. Du kan se deg rundt i et begrenset synsfelt, men når handlingen skjedde, ville øynene dine kommandere videoen hvor du skulle fokusere. Hvis et skudd blokkeres og en rask pause begynner, er det mer naturlig å følge med øynene enn å piske hodet rundt for å se ballen rase nedover banen.

Det er imidlertid noen ulemper. For det første krever det et nytt kamera atskilt fra PlayStation 4s kamera. Når det er sagt, var enheten som ble vist en ren prototype, og det kan alltid være en sjanse for at de finner en måte å integrere eksisterende kameraer for å bruke teknologien via programvareoppdateringer. Men hvis den ble utgitt i morgen, må du kjøpe en ny periferienhet.

En annen, mer betydelig, ulempe er programvarens problemer med å spore øyne bak briller. Det er truffet eller savner om det gjenkjenner bevegelsen av øynene bak linser eller ikke, og folk som bruker briller vil få problemer. Det kan til slutt fikses. Men selv om du er fri for briller, må du sitte nært kameraet. For å spore øynenes bevegelser, må et kamera være nær nok til å følge bevegelsene, noe som kan skape et vanskelig problem med posisjonering. Alternativet ville være et kamera med høy oppløsning som er i stand til å zoome inn nok til å se øynene dine på avstand. Det er absolutt mulig, men det vil sannsynligvis koste mer enn det ville være verdt. Likevel er dette alle løse problemer.

Sonys øyesporingsteknologi var først vist tilbake i november 2013 mens verden forberedte seg på ankomsten av PlayStation 4. Det ble fremhevet som en del av titten på Magic Labs, selskapet som også er ansvarlig for enheter som Move, Eye Toy Camera og sist DualShock 4. På den tiden var øyesporingen lite mer enn en gimmick – en fin gimmick – men sammenlignet med utgivelsen av det nye systemet, var ikke en teoretisk prototype et stort fokus. Nå som PlayStation 4 er på markedet, er grensene for spill imidlertid klare til å bli presset av enheter som denne, Project Morpheus og andre vi ikke har vurdert ennå (men vi sannsynligvis jobbes med i laboratorier rundt verden).

Med Project Morpheus som kaster en lang skygge, er øyesporing fortsatt bare et sideshow, spesielt siden det ikke er noen faste planer for det for øyeblikket. Men gi det tid. Dette kan bare være en del av fremtidens spill.