Як це працюватиме

Вперше представлений на минулорічній конференції Google I/O, Project Gameface використовує камеру пристрою для виявлення та інтерпретації рухів користувача, узгоджуючи їх з базою даних API виявлення міміки MediaPipes.

Дивіться також Великий день ШІ: що показала компанія Google на презентації I/O 2024

Наприклад, користувачі можуть маніпулювати курсором миші, відкриваючи рот, або виділяти області екрана, піднімаючи брови.

Завдяки камері пристрою рішення постійно відстежує міміку та жести голови, перетворюючи їх на зручні та адаптовані для користувача елементи керування. Розробники отримують можливість створювати застосунки, в яких користувачі можуть персоналізувати елементи керування, налаштовуючи вираз обличчя, реакцію на жести, швидкість курсора тощо,
– йдеться в офіційному повідомленні Google.

Хоча Gameface спочатку був представлений як проєкт, орієнтований на ігри, Google оголосив про співпрацю з Incluzza, індійським соціальним фондом, який займається вирішенням проблем доступності, з якими стикаються люди з обмеженими можливостями.

Ось на що здатен проєкт Google: дивіться відео

Читайте на сайті Google поглибить інтеграцію штучного інтелекту з Android: які функції слід чекати

Це партнерство має на меті дослідити потенційне розширення корисності Gameface поза межами ігор, у таких сферах, як професійна діяльність, освітнє середовище та різні соціальні контексти.