Convertí mi cara en un controlador de juego usando GameFace

Sundar Pichai frente a un logotipo de Google en Google IO 2021.
Esta historia es parte de nuestra cobertura completa de Google I/O

En Google I/O, la IA fue un tema durante todo el evento, pero se anunció otra tecnología de asistencia revolucionaria que permite que su rostro controle una computadora en lugar de usar un mouse. de Google Proyecto GameFace literalmente convierte tu cara en un controlador de juego. Si incluso el mejor mouse o trackball está resultando difícil o imposible, esta aplicación gratuita puede mejorar significativamente su experiencia informática.

Alan Truly prueba Project Gameface mientras ve a Lance Carr.
Alan Truly prueba Project GameFace mientras ve a Lance Carr.

La publicación del blog de Google describe cómo Project GameFace se inspiró en la difícil situación de los transmisores de videojuegos. lanza carr, que tiene distrofia muscular. Un incendio provocó la pérdida del costoso mouse de seguimiento de la cabeza de Carr, que le había permitido seguir jugando.

Vídeos recomendados

Google trabajó con Carr para desarrollar Project GameFace, una solución que usa una cámara web estándar y funciona en cualquier PC con Windows. Puedes descargar la aplicación desde el

Proyecto GitHub o bifurcación, y personalícelo para sus propias necesidades particulares si conoce Python.

Lo instalé y lo probé. Mi cámara web integrada funcionó para el control del puntero, pero una ventana cercana la apagó demasiado como para detectar bien mis cejas y mi boca. conecté un Insta360 Link, que incluye seguimiento facial tecnología para girar e inclinar mientras me muevo. Las dos tecnologías se combinaron a la perfección y todo funcionó muy bien después de algunos ajustes.

La velocidad del cursor era demasiado rápida, por lo que bajé de la configuración predeterminada de 40 a 15 verticalmente y 20 horizontalmente. Con estos ajustes, podía mover el puntero del mouse a cualquier punto de la pantalla simplemente girando e inclinando la cabeza. Esto no es seguimiento ocular. Parece seguir mi nariz.

Project Gameface de Google tiene ajustes para la velocidad del cursor.
Project GameFace de Google tiene ajustes para la velocidad del cursor.

La aplicación reconoce seis gestos faciales: boca abierta, boca izquierda y derecha, levantar la ceja izquierda y derecha y bajar la ceja derecha. No está claro por qué la ceja inferior izquierda no es una opción. Estos ajustes de gestos, combinados con el movimiento de la cabeza para el control direccional, hacen que sea relativamente fácil para vincular teclas y clics del mouse, lo que le permite jugar un juego o controlar una computadora solo con su cara.

Hay mucho margen de mejora aquí. Idealmente, los grupos de vinculaciones de gestos y velocidades de cursor deben guardarse para cada aplicación para que no tenga que encontrar una única configuración que funcione para todo. También sería más conveniente requerir un clic de confirmación, con una cuenta regresiva para revertir, luego de ajustar la velocidad del cursor. Me tomó unos minutos dominar el puntero salvaje del mouse cuando activé el seguimiento de rostros por primera vez.

En general, Project GameFace es una adaptación maravillosa que debería hacer la vida mucho más fácil para muchas personas que, de otro modo, tendrían dificultades para navegar en una computadora o jugar un juego. Más empresas de tecnología deberían aprovechar control de gestos habilitado por una cámara web.

Recomendaciones de los editores

  • Puedo descansar: mi búsqueda del mejor controlador de juegos para PC ha terminado
  • Construí una PC para juegos de sofá que avergüenza a la PS5, y tú también puedes

Mejora tu estilo de vidaDigital Trends ayuda a los lectores a mantenerse al tanto del vertiginoso mundo de la tecnología con las últimas noticias, reseñas divertidas de productos, editoriales perspicaces y adelantos únicos.