Jeg forvandlede mit ansigt til en spilcontroller ved hjælp af GameFace

Sundar Pichai står foran et Google-logo på Google IO 2021.
Denne historie er en del af vores komplette Google I/O-dækning

Hos Google I/O var AI et tema under hele begivenheden, men en anden spilskiftende hjælpeteknologi blev annonceret, der lader dit ansigt styre en computer i stedet for at bruge en mus. Googles Projekt GameFace bogstaveligt talt forvandler dit ansigt til en spilcontroller. Hvis endda den bedste mus eller trackball er vanskeligt eller umuligt, kan denne gratis app forbedre din computeroplevelse markant.

Alan virkelig prøver Project Gameface, mens han ser Lance Carr.
Alan virkelig prøver Project GameFace, mens han ser Lance Carr.

Googles blogindlæg beskriver, hvordan Project GameFace blev inspireret af videospil-streamerens situation Lance Carr, der har muskelsvind. En brand førte til tabet af Carrs dyre hovedsporende mus, hvilket havde givet ham mulighed for at fortsætte med at spille.

Anbefalede videoer

Google arbejdede sammen med Carr om at udvikle Project GameFace, en løsning, der bruger et standardwebkamera og fungerer på enhver Windows-pc. Du kan downloade appen fra GitHub projekt eller gaffel, og tilpas den til dine egne særlige behov, hvis du kender Python.

Jeg installerede og prøvede det. Mit indbyggede webcam fungerede til markørstyring, men blev for blæst ud af et nærliggende vindue til at kunne registrere mine øjenbryn og mund godt. Jeg tilsluttede en Insta360 Link, som inkluderer ansigtssporing teknologi til at panorere og vippe, når jeg bevæger mig rundt. De to teknologier blandede sig problemfrit, og alt fungerede godt efter lidt finjustering.

Markørhastigheden var alt for hurtig, så jeg faldt fra standardindstillingen på 40 til 15 lodret og 20 vandret. Med disse justeringer kunne jeg flytte min musemarkør til ethvert punkt på min skærm blot ved at dreje og vippe mit hoved. Dette er ikke eye-tracking. Det ser ud til at følge min næse.

Googles Project Gameface har justeringer for markørhastighed.
Googles Project GameFace har justeringer for markørhastighed.

Appen genkender seks ansigtsbevægelser: åben mund, mund til venstre og højre, hæv venstre og højre øjenbryn og sænk højre øjenbryn. Det er uklart, hvorfor nederste venstre øjenbryn ikke er en mulighed. Disse gestus-indstillinger, kombineret med hovedbevægelser til retningsbestemt kontrol, gør det relativt nemt at binde taster og museklik, så du kan spille et spil eller styre en computer med kun dit ansigt.

Der er masser af plads til forbedringer her. Ideelt set bør grupper af gestusbindinger og markørhastigheder gemmes for hver app, så du ikke behøver at finde en enkelt konfiguration, der fungerer til alt. Det ville også være mere praktisk at kræve et bekræftelsesklik med en nedtælling for at gå tilbage, efter at have justeret markørhastigheden. Det tog mig et par minutter at tæmme min vilde musemarkør, da jeg første gang tændte for ansigtssporing.

Samlet set er Project GameFace en vidunderlig tilpasning, der burde gøre livet meget lettere for mange mennesker, der ellers kunne kæmpe med at navigere på en computer eller spille et spil. Flere teknologivirksomheder burde drage fordel af gestus kontrol aktiveret af et webcam.

Redaktørens anbefalinger

  • Jeg kan hvile mig - min søgen efter den ultimative pc-gamingcontroller er slut
  • Jeg byggede en sofa-gaming-pc, der gør PS5 til skamme - og det kan du også

Opgrader din livsstilDigital Trends hjælper læserne med at holde styr på den hurtige teknologiske verden med alle de seneste nyheder, sjove produktanmeldelser, indsigtsfulde redaktionelle artikler og enestående smugkig.