Sommaire
L’interface révolutionnaire de Meta : Un aperçu des gestes du bracelet sEMG pour les lunettes AR
Une avancée technologique signée Meta
Dans un article publié dans Nature, Meta a détaillé les gestes du bracelet sEMG, destiné à contrôler ses lunettes HUD et AR.
Cet article, intitulé “A generic non-invasive neuromotor interface for human-computer interaction”, décrit en détail le dispositif que Meta développe depuis l’acquisition de CTRL Labs en 2019, une startup cofondée par Thomas Reardon, spécialiste en neurosciences computationnelles, qui continue de diriger le projet chez Meta.
Le fonctionnement du bracelet sEMG
Le bracelet sEMG détecte l’activation des muscles du poignet qui dirigent les mouvements des doigts, grâce à une technique nommée électromyographie de surface.
Cela permet un suivi précis des mouvements des doigts avec une faible consommation d’énergie, sans nécessiter de caméra.
Ainsi, il est possible de contrôler les interfaces virtuelles avec de subtils mouvements des doigts, sans lever les bras ni parler à haute voix. La vidéo accompagnant l’article présente quatre types de gestes :
- Écrire des caractères individuels avec le doigt, convertis ensuite en caractères numériques pour la saisie de texte.
- Tourner la main en utilisant le poignet pour contrôler un curseur unidimensionnel.
- Balayer le pouce contre le côté de l’index.
- Taper ou maintenir le pouce contre l’index pour un tap/clic.
Vers une accessibilité élargie
L’article affirme que la technologie sEMG de Meta peut désormais se généraliser à de nouveaux utilisateurs, sans qu’un modèle d’entraînement par utilisateur soit nécessaire.
Meta a diffusé plus de 100 heures d’enregistrements sEMG pour la communauté scientifique, ce qui devrait aider à promouvoir les technologies d’accessibilité dans le monde entier.
L’équipement présenté dans l’article est un prototype de recherche, semblable à celui montré en 2021. Lors de la Meta Connect 2024, une version plus raffinée du bracelet, nommée Ceres, a été officiellement dévoilée comme dispositif d’entrée pour le prototype de lunettes AR Orion.
Intégration des gestes dans Meta Quest
Introduit en mars comme une fonctionnalité SDK de Meta Quest sous le nom de microgestures, le geste du pouce balayant l’index a été crucial pour la démonstration d’Orion.
Des rendus et des enregistrements d’un dispositif similaire ont été découverts dans un firmware précoce fuitée des lunettes HUD, que plusieurs publications comme The Verge, The Information, et Bloomberg ont rapporté que Meta prévoit de lancer sous le nom de Meta Celeste plus tard cette année.
Préparation au lancement de Meta Celeste
Mark Gurman a révélé que Meta prévoit d’inclure le bracelet avec Hypernova, le tout pour un prix total compris entre 1300 à 1400 $.
Des vidéos tutoriellement liés à ce firmware expliquent les gestes vus dans l’article de Nature, ainsi que d’autres comme pincer le pouce et l’index et effectuer un mouvement de traction horizontal ou vertical.
Nous prédisons que Meta annoncera Celeste lors de “Meta Connect 2025”, prévue le 17 septembre, avec ouverture des précommandes pour octobre, sauf retard imprévu.
En avril, Mark Gurman a également rapporté que certains employés de Meta travaillaient durant les week-ends afin de s’assurer que ces lunettes HUD soient prêtes à temps. Dans environ deux mois, nous saurons si ces efforts ont porté leurs fruits.
