Google выпустила Project Gameface для управления смартфоном бровями и ртом

Google объявила о предоставлении исходного кода своего проекта Project Gameface для Android широкому кругу разработчиков. Эта технология позволяет управлять интерфейсом смартфона без использования рук, говорится в блоге компании.

Project Gameface впервые был представлен на прошлогодней конференции Google I/O как альтернатива привычным интерфейсам ввода в играх.

С помощью камеры Project Gameface отслеживает мимику и движения головы пользователя, трансформируя их в команды управления курсором. Например, поднятие бровей позволяет выбирать объекты на экране, а открытие рта перемещает курсор.

Однако данная технология не будет поддерживаться на Android во всех приложениях. Для этого разработчики должны будут оптимизировать свои игры и программы. С открытым доступом к коду для операционной системы Android разработчики получат возможность интегрировать эту технологию в свои приложения. Project Gameface использует базу данных Face Landmarks Detection API от MediaPipe, включающую более 50 различных выражений лица и движений головы.

Первоначально ориентированный на игры Project Gameface теперь рассматривается Google как инструмент с потенциалом для применения в образовательной сфере, рабочих процессах, социальных сетях и других сценариях. Особенно значимым является его потенциал для улучшения доступности технологий для людей с ограниченными физическими возможностями.