Sony’s onderzoek naar eye-tracking voor videogames is verbazingwekkend

Sony's onderzoek eye-tracking-videogames absoluut geweldige Sony PlayStation Magic Labs

Terwijl Sony er meer dan een paar onder de indruk zijnde uitroepen van pers, fans en leden van de gaminggemeenschap mee wist te verdienen nieuwe virtual reality-headset met de codenaam 'Project Morpheus', een van de meest ongelooflijke stukjes hardware zat onopgemerkt in een achterkamer en had niets te maken met virtual reality.

De technologie in kwestie is een stuk naamloze prototype-hardware die wel of niet ooit in de detailhandel terecht zal komen, maar dat zou wel moeten – het biedt letterlijk een nieuwe manier om naar games te kijken. Met behulp van een speciaal ontworpen camera heeft een van de onderzoeks- en ontwikkelingsteams van Sony (de groep die bekend staat als Magic Labs) een manier bedacht waarmee je de camera in een game met je ogen kunt besturen. Het is niet iets dat de aard van gaming op dezelfde manier verandert als virtual reality, maar het is een van de coolste stukjes gamingtechnologie die op GDC te zien is.

Aanbevolen video's

De eye-trackingtechnologie is nog lang niet op de markt – en er is geen garantie dat dit ooit zal gebeuren – maar het potentieel is ongelooflijk. Eye-tracking wordt een veelvoorkomend kenmerk van smartphones, maar de schaal van Sony’s toestel overschaduwt alles wat een smartphone momenteel te bieden heeft. In de getoonde demo werden de eye-trackingtools van Sony (die momenteel technisch gezien nog geen naam hebben) gebruikt in combinatie met de PlayStation 4-game

Onbekende tweede zoon.

Om de energiestoten te helpen hun doel te bereiken, hoef je alleen maar te kijken naar wat je wilt raken.

Het begint allemaal met een snelle kalibratie die net zo eenvoudig is als kijken naar de ene stip in de linkerbovenhoek en vervolgens naar de andere aan de diagonaal tegenoverliggende kant. De camera begint vervolgens gegevens naar een nabijgelegen laptop te verzenden, die op zijn beurt het overneemt van de camera van het spel.

Het duurt enkele ogenblikken om je te oriënteren op de nieuwe manier van kijken. In een third-person-game is het normaal dat je ogen naar je personage worden getrokken dat zich onder het midden van je scherm bevindt. Met de eye-trackingsoftware zorgt het kijken naar je personage er dus voor dat de camera naar beneden draait. Maar als je eenmaal compenseert, zijn de effecten verbluffend.

Naast de mogelijkheid om met je ogen rond te kijken op dezelfde manier waarop je normaal gesproken de camera ronddraait met de rechter thumbstick, kan de tracking ook veel nauwkeuriger zijn. In BeruchtAls je snel op de R2-knop tikt, wordt een stroom energiestoten naar tegenstanders gestuurd, vergelijkbaar met het afvuren van een machinegeweer, maar met langzamere projectielen. Om de energiestoten te helpen hun doel te bereiken, hoef je alleen maar te kijken naar wat je wilt raken. Als je tegenover twee vijanden staat, één aan elke kant van je, kijk dan gewoon in de ene richting en dan in de andere en de energiestoten zullen hun doel vinden. Het registreert je bewegingen net zo snel als je ogen bewegen, waardoor een responsieve camera ontstaat die de manier waarop we games visueel invoeren voor altijd kan veranderen.

Hoewel de demo zich concentreerde op wat, in alle opzichten, een third-person shooter is (althans in de demo, die een vroege gedeelte van het spel waar energiestoten tot je meest effectieve wapens behoorden), zijn de mogelijkheden met Sony's eye-tracking-technologie dat wel eindeloos. Stel je voor dat je een voetbalwedstrijd speelt en, in plaats van te proberen onhandig te passen naar een bepaalde speler die in een ongebruikelijk patroon loopt, kijk je gewoon naar hem en druk je op de pass-knop. In het voetbal kun je, terwijl je de quarterback bestuurt, eenvoudigweg naar je ontvangers kijken en op de pass drukken naar degene die je wilt. Bij first-person shooters zou je theoretisch sneller kunnen mikken dan je duim kan bewegen.

Er zijn ook mogelijke toepassingen voor de technologie met de Virtual Reality-headset van Project Morpheus. Het is nu nog slechts theoretisch (voor zover wij weten), maar we kunnen ons voorstellen dat je op een dag misschien de VR kunt opzetten headset en kijk rond in de virtuele wereld door uw hoofd te bewegen, maar kijk ook rond zoals u dat van nature zou doen, met uw hoofd ogen.

Sony eyetracking Magic Labs

 De effecten kunnen ook verder gaan dan alleen gamen. Stel je voor dat je een 3D-uitzending van een basketbalwedstrijd bekijkt met een virtual reality-headset. Je zou in een beperkt gezichtsveld rond kunnen kijken, maar wanneer de actie plaatsvond, gaven je ogen de video opdracht waar hij zich op moest concentreren. Als een schot wordt geblokkeerd en een snelle break begint, is het natuurlijker om met je ogen te volgen dan je hoofd rond te draaien om de bal over het veld te zien racen.

Er zijn echter enkele nadelen. Ten eerste vereist het een nieuwe camera, los van de camera van de PlayStation 4. Dat gezegd hebbende, het tentoongestelde apparaat was een puur prototype, en er zou altijd een kans kunnen zijn dat ze een manier zouden vinden om bestaande camera's te integreren om de technologie te gebruiken via software-updates. Maar als het morgen zou worden uitgebracht, zou je een nieuw randapparaat moeten kopen.

Een ander, belangrijker nadeel zijn de problemen van de software met het volgen van ogen achter een bril. Het is een schot in de roos of het de beweging van de ogen achter lenzen wel of niet herkent, en brildragers zullen problemen tegenkomen. Dat zou uiteindelijk opgelost kunnen worden. Maar zelfs als u geen bril draagt, moet u dicht bij de camera zitten. Om de beweging van de ogen te kunnen volgen, moet een camera dichtbij genoeg zijn om de bewegingen te volgen, wat mogelijk een lastig positioneringsprobleem kan opleveren. Het alternatief zou een camera met hoge resolutie zijn die voldoende kan inzoomen om je ogen van een afstand te kunnen zien. Dat is zeker mogelijk, maar het zou waarschijnlijk meer kosten dan het waard zou zijn. Toch zijn dit allemaal oplosbare problemen.

De eye-trackingtechnologie van Sony was dat wel voor het eerst getoond in november 2013 terwijl de wereld zich voorbereidde op de komst van de PlayStation 4. Het werd benadrukt als onderdeel van de blik op Magic Labs, het bedrijf dat ook verantwoordelijk is voor apparaten als de Move, de Eye Toy Camera en meest recentelijk de DualShock 4. Destijds was eye-tracking weinig meer dan een gimmick – een leuke gimmick – maar vergeleken met de release van het nieuwe systeem was een theoretisch prototype geen belangrijk aandachtspunt. Nu de PlayStation 4 op de markt is, zijn de grenzen van gaming echter klaar om te worden verlegd door apparaten als deze, Project Morpheus, en andere die we nog niet hebben overwogen (maar waar waarschijnlijk aan wordt gewerkt in laboratoria over de hele wereld). wereld).

Nu het Project Morpheus een lange schaduw werpt, is eye-tracking nog steeds slechts een bijzaak, vooral omdat er op dit moment geen definitieve plannen voor zijn. Geef het echter de tijd. Dit zou zomaar een deel van de toekomst van gaming kunnen zijn.