Ho trasformato la mia faccia in un controller di gioco usando GameFace

Sundar Pichai si trova di fronte a un logo di Google al Google IO 2021.
Questa storia fa parte della nostra copertura completa di Google I/O

Al Google I/O, l'intelligenza artificiale era un tema durante l'evento, ma è stata annunciata un'altra tecnologia assistiva rivoluzionaria che consente al tuo viso di controllare un computer invece di utilizzare un mouse. di Google Progetto GameFace trasforma letteralmente la tua faccia in un controller di gioco. Se pari il miglior mouse o trackball sta diventando difficile o impossibile, questa app gratuita può migliorare significativamente la tua esperienza informatica.

Alan Truly prova Project Gameface mentre guarda Lance Carr.
Alan Truly prova Project GameFace mentre guarda Lance Carr.

Il post sul blog di Google descrive come Project GameFace sia stato ispirato dalla difficile situazione dello streamer di videogiochi Lance Carr, che ha la distrofia muscolare. Un incendio ha portato alla perdita del costoso mouse di tracciamento della testa di Carr, che gli aveva permesso di continuare a giocare.

Video consigliati

Google ha collaborato con Carr per sviluppare Project GameFace, una soluzione che utilizza una webcam standard e funziona su qualsiasi PC Windows. Puoi scaricare l'app dal

Progetto Github o fork e personalizzalo per le tue esigenze particolari se conosci Python.

L'ho installato e provato. La mia webcam integrata funzionava per il controllo del puntatore, ma era troppo spenta da una finestra vicina per rilevare bene le sopracciglia e la bocca. Ho collegato un Insta360 Link, che include il rilevamento del volto tecnologia per eseguire la panoramica e l'inclinazione mentre mi muovo. Le due tecnologie si sono integrate perfettamente e tutto ha funzionato alla grande dopo un po' di messa a punto.

La velocità del cursore era troppo elevata, quindi sono passato dall'impostazione predefinita di 40 a 15 in verticale e 20 in orizzontale. Con queste regolazioni, potevo spostare il puntatore del mouse in qualsiasi punto dello schermo semplicemente girando e inclinando la testa. Questo non è eye-tracking. Sembra seguire il mio naso.

Project Gameface di Google ha regolazioni per la velocità del cursore.
Project GameFace di Google ha regolazioni per la velocità del cursore.

L'app riconosce sei gesti del viso: bocca aperta, bocca sinistra e destra, alza sopracciglio sinistro e destro e sopracciglio inferiore destro. Non è chiaro perché il sopracciglio inferiore sinistro non sia un'opzione. Queste impostazioni dei gesti, combinate con il movimento della testa per il controllo direzionale, lo rendono relativamente facile per associare tasti e clic del mouse, permettendoti di giocare o controllare un computer solo con il tuo viso.

C'è molto spazio per migliorare qui. Idealmente, gruppi di associazioni di gesti e velocità del cursore dovrebbero essere salvati per ogni app in modo da non dover trovare un'unica configurazione che funzioni per tutto. Sarebbe anche più conveniente richiedere un clic di conferma, con un conto alla rovescia per tornare indietro, dopo aver regolato la velocità del cursore. Mi ci sono voluti alcuni minuti per domare il mio puntatore selvaggio del mouse quando ho attivato per la prima volta il rilevamento del volto.

Nel complesso, Project GameFace è un meraviglioso adattamento che dovrebbe rendere la vita molto più semplice a molte persone che altrimenti potrebbero avere difficoltà a navigare su un computer o giocare. Più aziende tecnologiche dovrebbero trarne vantaggio controllo dei gesti abilitato da una webcam.

Raccomandazioni della redazione

  • Posso riposare: la mia ricerca del controller di gioco per PC definitivo è finita
  • Ho costruito un PC da gioco da divano che fa vergognare la PS5, e puoi farlo anche tu

Migliora il tuo stile di vitaDigital Trends aiuta i lettori a tenere d'occhio il frenetico mondo della tecnologia con tutte le ultime notizie, recensioni divertenti sui prodotti, editoriali penetranti e anticipazioni uniche.