Google представил новый способ управления смартфоном при помощи мимики
После прошлогоднего дебюта Project Gameface на конференции разработчиков ввода-вывода 2023 года компания Google объявила о значительном обновлении: открытии исходного кода для инновационной игровой «мыши», которая работает без помощи рук. Этот шаг дает разработчикам возможность интегрировать технологию Project Gameface в приложения Android, расширяя ее доступность и потенциальное влияние.
Project Gameface использует переднюю камеру телефона для отслеживания выражений лица и движений головы пользователя, позволяя управлять виртуальным курсором без необходимости использования традиционных устройств ввода. Поддерживается 52 уникальных жеста лица. К ним относятся поднятие брови, открытие рта, взгляд в определенном направлении, улыбка и многое другое. Каждый жест можно сопоставить с каким-либо действием, например, «убрать панель уведомлений», «вернуться к предыдущему приложению», «открыть панель приложений» или «вернуться домой». Например, улыбка может служить жестом «выбора», а поднятие брови может вызвать возврат на главный экран Android. Более того, пользователи имеют возможность настроить чувствительность каждого жеста, обеспечивая персонализированный и комфортный опыт.
Google также выпустил видео, демонстрирующее некоторые возможности Project Gameface. Легко представить, как эта технология может сделать использование телефона более доступным для людей с ограниченными физическими возможностями.
Google разработал Project Gameface в партнерстве с Лэнсом Карром, вдохновленная историей парализованного стримера видеоигр, борющегося с мышечной дистрофией. Проблемы Лэнса с традиционным управлением мышью из-за мышечной слабости послужили толчком к созданию альтернативы управления устройством без помощи рук. Эта технология меняет правила игры для людей с ограниченными возможностями, предоставляя им новый способ взаимодействия с устройствами Android.
Сотрудничество Google с компаниями playAbility и Incluzza привело к открытию исходного кода для Project Gameface, что позволило разработчикам интегрировать эту технологию в разнообразные приложения. Например, Incluzza изучает возможность использования Project Gameface в образовательной и рабочей среде, в том числе для набора сообщений или поиска работы.
«Мы были очень рады видеть, что такие компании, как playAbility, используют строительные блоки Project Gameface в своем комплексном программном обеспечении. Теперь, благодаря открытому исходному коду, разработчики могут создавать на Android специальные приложения, повышающие доступность для пользователей», — сообщила компания Google в своем блоге.
