Ich habe mein Gesicht mit GameFace in einen Gamecontroller verwandelt

Sundar Pichai steht bei Google IO 2021 vor einem Google-Logo.
Diese Geschichte ist Teil unserer vollständigen Google I/O-Berichterstattung

Bei Google I/O war KI ein Thema Während der gesamten Veranstaltung wurde jedoch eine weitere bahnbrechende Hilfstechnologie angekündigt, die es Ihnen ermöglicht, einen Computer mit Ihrem Gesicht zu steuern, anstatt eine Maus zu verwenden. Googles Projekt GameFace verwandelt Ihr Gesicht buchstäblich in einen Gamecontroller. Wenn auch die beste Maus oder der beste Trackball sich als schwierig oder unmöglich erweist, kann diese kostenlose App Ihr ​​Computererlebnis erheblich verbessern.

Alan Truly probiert Project Gameface aus, während er Lance Carr beobachtet.
Alan Truly probiert Project GameFace aus, während er Lance Carr beobachtet.

Der Blogbeitrag von Google beschreibt, wie Project GameFace von der Notlage der Videospiel-Streamer inspiriert wurde Lance Carr, der an Muskeldystrophie leidet. Ein Brand führte zum Verlust von Carrs teurer Head-Tracking-Maus, die es ihm ermöglicht hatte, weiter zu spielen.

Empfohlene Videos

Google hat mit Carr zusammengearbeitet, um Project GameFace zu entwickeln, eine Lösung, die eine Standard-Webcam verwendet und auf jedem Windows-PC funktioniert. Sie können die App herunterladen

GitHub-Projekt oder Fork und passen Sie es an Ihre speziellen Bedürfnisse an, wenn Sie Python kennen.

Ich habe es installiert und ausprobiert. Meine eingebaute Webcam funktionierte zur Zeigersteuerung, wurde aber durch ein nahegelegenes Fenster zu stark ausgeblendet, um meine Augenbrauen und meinen Mund gut erkennen zu können. Ich habe ein angeschlossen Insta360 Link, der Face-Tracking beinhaltet Technologie zum Schwenken und Neigen, während ich mich bewege. Die beiden Technologien fügten sich nahtlos zusammen und nach einiger Feinabstimmung funktionierte alles großartig.

Die Cursorgeschwindigkeit war viel zu schnell, daher habe ich die Standardeinstellung von 40 auf 15 vertikal und 20 horizontal gesenkt. Mit diesen Anpassungen konnte ich meinen Mauszeiger einfach durch Drehen und Neigen meines Kopfes an jeden beliebigen Punkt auf meinem Bildschirm bewegen. Das ist kein Eye-Tracking. Es scheint meiner Nase zu folgen.

Googles Project Gameface verfügt über Anpassungen für die Cursorgeschwindigkeit.
Googles Project GameFace verfügt über Anpassungen für die Cursorgeschwindigkeit.

Die App erkennt sechs Gesichtsgesten: Mund öffnen, Mund links und rechts, linke und rechte Augenbraue heben und rechte Augenbraue senken. Es ist unklar, warum die untere linke Augenbraue keine Option ist. Diese Gesteneinstellungen machen es in Kombination mit der Kopfbewegung zur Richtungssteuerung relativ einfach um Tasten und Mausklicks zu binden, sodass Sie nur mit Ihrem Gesicht ein Spiel spielen oder einen Computer steuern können.

Hier gibt es viel Raum für Verbesserungen. Idealerweise sollten Gruppen von Gestenbindungen und Cursorgeschwindigkeiten für jede App gespeichert werden, damit Sie nicht eine einzige Konfiguration finden müssen, die für alles funktioniert. Es wäre auch bequemer, nach der Anpassung der Cursorgeschwindigkeit einen Bestätigungsklick mit einem Countdown zum Zurücksetzen zu verlangen. Es dauerte ein paar Minuten, bis ich meinen wilden Mauszeiger bändigte, als ich die Gesichtsverfolgung zum ersten Mal einschaltete.

Insgesamt ist Project GameFace eine wunderbare Adaption, die vielen Menschen das Leben erheblich erleichtern dürfte, denen es sonst schwerfallen würde, sich am Computer zurechtzufinden oder ein Spiel zu spielen. Mehr Technologieunternehmen sollten davon profitieren Gestensteuerung per Webcam möglich.

Empfehlungen der Redaktion

  • Ich kann mich ausruhen – meine Suche nach dem ultimativen PC-Gaming-Controller ist vorbei
  • Ich habe einen Couch-Gaming-PC gebaut, der die PS5 in den Schatten stellt – und das können Sie auch

Werten Sie Ihren Lebensstil aufDigital Trends hilft Lesern mit den neuesten Nachrichten, unterhaltsamen Produktrezensionen, aufschlussreichen Leitartikeln und einzigartigen Einblicken, den Überblick über die schnelllebige Welt der Technik zu behalten.