Zmieniłem swoją twarz w kontroler do gier za pomocą GameFace

Sundar Pichai stoi przed logo Google na Google IO 2021.
Ta historia jest częścią naszej pełnej relacji z Google I/O

Tematem konferencji Google I/O była sztuczna inteligencja przez całe wydarzenie, ale ogłoszono kolejną przełomową technologię wspomagającą, która pozwala twojej twarzy sterować komputerem zamiast używania myszy. Google'a Projekt GameFace dosłownie zamienia twoją twarz w kontroler do gier. Jeśli nawet najlepsza mysz lub trackball jest trudne lub niemożliwe, ta bezpłatna aplikacja może znacznie poprawić jakość korzystania z komputera.

Alan Truly wypróbowuje Project Gameface podczas oglądania Lance'a Carra.
Alan Truly wypróbowuje Project GameFace podczas oglądania Lance'a Carra.

Wpis na blogu Google opisuje, w jaki sposób projekt GameFace został zainspirowany trudną sytuacją streamera gier wideo Lans Carr, który ma dystrofię mięśniową. Pożar doprowadził do utraty drogiej myszy śledzącej głowę Carra, która pozwoliła mu dalej grać.

Polecane filmy

Firma Google współpracowała z Carrem przy opracowywaniu Project GameFace, rozwiązania wykorzystującego standardową kamerę internetową i działającego na dowolnym komputerze z systemem Windows. Możesz pobrać aplikację z

Projekt GitHuba lub fork i dostosuj go do własnych potrzeb, jeśli znasz Pythona.

Zainstalowałem i wypróbowałem. Moja wbudowana kamera internetowa działała do sterowania wskaźnikiem, ale była zbyt zdmuchnięta przez pobliskie okno, by dobrze wykryć moje brwi i usta. Podłączyłem się Insta360 Link, który obejmuje śledzenie twarzy technologię obracania i pochylania, gdy się poruszam. Te dwie technologie połączyły się płynnie i po pewnym dopracowaniu wszystko działało świetnie.

Szybkość kursora była o wiele za duża, więc obniżyłem domyślne ustawienie 40 do 15 w pionie i 20 w poziomie. Dzięki tym dostosowaniom mogłem przesuwać wskaźnik myszy w dowolne miejsce na ekranie, po prostu obracając i przechylając głowę. To nie jest śledzenie wzroku. Wydaje się podążać za moim nosem.

Google Project Gameface ma korekty szybkości kursora.
Google Project GameFace ma korekty szybkości kursora.

Aplikacja rozpoznaje sześć gestów twarzy: otwarte usta, usta lewe i prawe, uniesienie lewej i prawej brwi oraz opuszczenie prawej brwi. Nie jest jasne, dlaczego dolna lewa brew nie jest opcją. Te ustawienia gestów w połączeniu z ruchem głowy w celu sterowania kierunkiem sprawiają, że jest to stosunkowo łatwe do wiązania klawiszy i kliknięć myszką, umożliwiając granie w gry lub sterowanie komputerem za pomocą samej twarzy.

Tutaj jest dużo miejsca na ulepszenia. Najlepiej byłoby zapisać grupy powiązań gestów i prędkości kursora dla każdej aplikacji, aby nie trzeba było szukać jednej konfiguracji, która działa dla wszystkich. Byłoby również wygodniej wymagać kliknięcia potwierdzenia, z odliczaniem do powrotu, po dostosowaniu prędkości kursora. Poskromienie dzikiego wskaźnika myszy zajęło mi kilka minut, kiedy po raz pierwszy włączyłem śledzenie twarzy.

Ogólnie rzecz biorąc, Project GameFace to wspaniała adaptacja, która powinna znacznie ułatwić życie wielu osobom, które w innym przypadku miałyby trudności z poruszaniem się po komputerze lub graniem w grę. Więcej firm technologicznych powinno z nich skorzystać sterowanie gestami włączone przez kamerę internetową.

Zalecenia redaktorów

  • Mogę odpocząć — moje poszukiwania najlepszego kontrolera do gier na PC dobiegły końca
  • Zbudowałem komputer do grania na kanapie, który zawstydza PS5 — i ty też możesz

Ulepsz swój styl życiaTrendy cyfrowe pomagają czytelnikom śledzić szybko zmieniający się świat technologii dzięki najnowszym wiadomościom, zabawnym recenzjom produktów, wnikliwym artykułom redakcyjnym i jedynym w swoim rodzaju zapowiedziom.