Google lance sa souris pilotable avec le visage sur Android
Elle suit de manière transparente les expressions faciales et les mouvements de la tête.
Hier, Google a organisé son événement I/O afin de présenter de nombreuses nouveautés. Quelques jours avant par ailleurs, Alphabet annonçait la mise à disposition de « Gameface » aux développeurs Android.
Le projet a été présenté en 2023 par Google, et était initialement destiné aux joueurs pc. Il s’agit d’une souris pilotable avec le visage :
Une nouvelle souris de jeu mains libres open source permet aux utilisateurs de contrôler le curseur d’un ordinateur à l’aide des mouvements de la tête et des gestes du visage.
Elle peut par exemple déclencher un clic lorsqu’on cligne des yeux, ou nous permettre de déplacer le curseur quand on ouvre la bouche. Chacun choisit les paramètres qui lui correspondent le mieux.
Gameface a été inspiré par le vidéaste Lance Carr, qui vit avec la dystrophie musculaire, une maladie invalidante qui affaiblit grandement les muscles. Ce qui l’empêche de profiter pleinement des jeux vidéo avec des équipements classiques, mais l’homme avait trouvé une solution.
Afin de contrôler le curseur à l’écran, il utilisait une souris à suivi de tête. Mais malheureusement pour lui, sa maison a brûle en 2021, alors qu’il était en plein direct sur la plateforme Twitch. Les flammes ont détruit l’ensemble de son équipement, dont la souris à suivi de tête, qui est très coûteuse.
Google raconte qu’après avoir pris connaissance de l’histoire, ils ont « travaillé avec Lance pour co-concevoir Project Gameface, une souris de jeu mains libres qui utilise les solutions open source de Google MediaPipe. »
Désormais ouvert aux applications Android
Afin d’élargir les possibilités de Gameface, la firme de Mountain View s’est associée à Incluza, une entreprise sociale indienne spécialisée dans l’accessibilité. L’objectif du partenariat est de découvrir comment Gameface peut aider les utilisateurs handicapés au quotidien, que ce soit à l’école, au travail, ou à la maison. Google annonce :
Nous lançons une nouvelle façon de commencer à utiliser un appareil Android. Sur la base des retours positifs sur le projet Gameface, nous avons réalisé que les développeurs et les utilisateurs appréciaient l’idée de déplacer un curseur avec un mouvement de tête et d’agir via des expressions faciales.
Gameface peut désormais être intégré aux applications Android, comme vient de l’annoncer Google :
Désormais, nous mettons à disposition davantage de code du projet Gameface, afin d’aider les développeurs à créer des applications Android à rendre chaque appareil Android plus accessible. Grâce à la caméra de l’appareil, il suit de manière transparente les expressions faciales et les mouvements de la tête, les traduisant en un contrôle intuitif et personnalisé.
Le code est disponible librement sur github et les développeurs peuvent dès à présent l’exploiter.
