Я перетворив своє обличчя на ігровий контролер за допомогою GameFace

Сундар Пічаї стоїть перед логотипом Google на Google IO 2021.
Ця історія є частиною нашого повного висвітлення Google I/O

На Google I/O ШІ був темою протягом усієї події, але було оголошено про іншу допоміжну технологію, яка змінила правила гри, яка дозволяє вашому обличчю керувати комп’ютером замість використання миші. Google Проект GameFace буквально перетворює ваше обличчя на ігровий контролер. Якщо навіть найкраща мишка або трекбол це важко чи неможливо, ця безкоштовна програма може значно покращити роботу з комп’ютером.

Алан Трулі пробує Project Gameface під час перегляду фільму Ленс Карр.
Алан Трулі пробує Project GameFace під час перегляду Ленса Карра.

Повідомлення в блозі Google описує, як проект GameFace був натхненний важким становищем стрімерів відеоігор Ленс Карр, який має м'язову дистрофію. Пожежа призвела до втрати дорогої миші для відстеження голови Карра, яка дозволяла йому продовжувати грати.

Рекомендовані відео

Google працював із Карром над розробкою Project GameFace, рішення, яке використовує стандартну веб-камеру та працює на будь-якому ПК з Windows. Ви можете завантажити програму з Проект GitHub або fork, і налаштуйте його для власних потреб, якщо ви знаєте Python.

Я встановив і спробував. Моя вбудована веб-камера працювала для керування вказівником, але її занадто задувало сусіднє вікно, щоб добре розпізнати мої брови та рот. Я підключив Insta360 Link, який включає відстеження обличчя технологія панорамування та нахилу, коли я рухаюся. Дві технології ідеально поєдналися, і після деякого тонкого налаштування все працювало чудово.

Швидкість курсору була надто високою, тому я змінив стандартне значення 40 на 15 по вертикалі та 20 по горизонталі. Завдяки цим налаштуванням я міг перемістити вказівник миші в будь-яку точку екрана, просто повертаючи та нахиляючи голову. Це не стеження за очима. Здається, йде за моїм носом.

У Project Gameface від Google є налаштування швидкості курсору.
Google Project GameFace має налаштування швидкості курсору.

Додаток розпізнає шість жестів обличчя: відкритий рот, рот ліворуч і праворуч, підняття лівої та правої брови та опускання правої брови. Незрозуміло, чому нижня ліва брова не є варіантом. Ці налаштування жестів у поєднанні з рухом голови для керування напрямком роблять це відносно легким для прив’язки клавіш і клацань миші, дозволяючи грати в ігри або керувати комп’ютером лише обличчям.

Тут є багато можливостей для вдосконалення. В ідеалі групи прив’язок жестів і швидкості курсору мають бути збережені для кожної програми, щоб вам не потрібно було шукати єдину конфігурацію, яка підходить для всіх. Також було б зручніше вимагати підтвердження клацання зі зворотним відліком для повернення після налаштування швидкості курсору. Мені знадобилося кілька хвилин, щоб приборкати свій дикий вказівник миші, коли я вперше ввімкнув відстеження обличчя.

Загалом, Project GameFace є чудовою адаптацією, яка має значно полегшити життя багатьом людям, яким інакше було б важко керувати комп’ютером або грати в гру. Більше технологічних компаній мають скористатися цим керування жестами за допомогою веб-камери.

Рекомендації редакції

  • Я можу відпочити — мої пошуки найкращого ігрового контролера для ПК закінчилися
  • Я створив диванний ігровий ПК, який присоромив PS5 — і ви теж можете

Оновіть свій спосіб життяDigital Trends допомагає читачам стежити за динамічним світом технологій завдяки всім останнім новинам, цікавим оглядам продуктів, проникливим редакційним статтям і унікальним у своєму роді коротким оглядам.