Google apporte Project Gameface, un projet annoncé lors de Google I/O 2023 sur Android. Project Gameface est une souris de jeu open source qui permet aux utilisateurs d'utiliser des expressions faciales et des mouvements de tête pour contrôler un curseur. Lorsque Project Gameface a été lancé, il était limité au bureau.
Désormais, Google augmente le nombre d'appareils pris en charge en intégrant cette technologie à Android. Gameface sur Android propose un nouveau curseur virtuel programmé pour se déplacer en fonction du mouvement de la tête de l'utilisateur.
Le projet Gameface a été initialement conçu pour aider les utilisateurs handicapés à jouer à des jeux.
Le projet Gameface a été lancé en tant que souris de jeu et vise à rendre les jeux informatiques plus accessibles aux personnes handicapées. Grâce à cette technologie, les utilisateurs peuvent contrôler le curseur via les mouvements de la bouche et effectuer des actions de clic et de glisser en haussant les sourcils. Les captures d'écran de Google montrent que les utilisateurs peuvent définir des liaisons de souris personnalisées pour différents gestes du visage.
Google affirme avoir utilisé l'API d'accessibilité Android pour donner vie à Gameface sur Android. L'API d'accessibilité Android prend en charge différents événements gestuels tels que GESTURE_SWIPE_UP_AND_RIGHT, GLOBAL_ACTION_BACK, etc. Gameface prend actuellement en charge une poignée d'événements de l'API d'accessibilité comme GLOBAL_ACTION_HOME et GLOBAL_ACTION_BACK.
La version Android offre des fonctionnalités similaires à son homologue de bureau
Étant donné que Gameface interprète l'expression faciale de l'utilisateur en mouvements de souris valides, un flux de caméra clair est nécessaire. Sur Android, Gameface indiquera à l'utilisateur quand la caméra est utilisée, en affichant une superposition du flux de la caméra. Google affirme que ce flux de caméra sera toujours disponible même dans les paramètres Android.
Tout comme la version de bureau, Gameface sur Android permet aux utilisateurs de personnaliser leur expérience en mappant différentes expressions faciales sur les entrées préférées. Les utilisateurs peuvent choisir différentes expressions faciales pour les tâches de navigation Android courantes, telles que la sélection d'un élément, l'accès à l'écran précédent ou l'ouverture de notifications.
Pour donner aux utilisateurs encore plus de contrôle, Project Gameface permet aux utilisateurs d'effectuer une « fonction glisser ». Cette « fonction glisser » permettra aux utilisateurs d'effectuer des tâches encore plus complexes, comme glisser dans différentes directions.
