Grâce à l' utilisation d' un bracelet, Meta peut taper et naviguer sans clavier ni souris

Dans un article évalué par des pairs , Reality Labs, filiale de Meta, détaille les travaux de l' entreprise sur le développement d'un dispositif d'entrée non invasif utilisant l' électromyographie de surface (sEMG). L' entreprise développe une technologie de bracelet qui utilise les signaux musculaires pour faciliter l'interaction homme-machine (IHM). Selon Meta , cette technologie permet au bracelet de reconnaître l'intention de l' utilisateur de saisir du texte et de naviguer sur un ordinateur sans clavier ni souris , ou de pincer, tapoter ou balayer avec les doigts.

La technologie expérimentale de l'entreprise , basée sur un bracelet qui reconnaît et interprète les signaux neuronaux contrôlant les muscles de l' utilisateur comme des commandes pour effectuer diverses tâches, est décrite dans un article évalué par des pairs publié dans la revue Nature. Ces fonctions incluent l'utilisation d'une interface utilisateur ou la saisie au clavier sans outils de saisie conventionnels .

L' entreprise affirme que sa technologie de bracelet peut aider les utilisateurs présentant des « capacités et caractéristiques physiques diverses » et que le sEMG est non invasif. De plus, Meta affirme que l'utilisation de données individuelles pour personnaliser la technologie peut améliorer jusqu'à 16 % la précision des modèles d'apprentissage automatique .

Le contrôle du curseur unidimensionnel au poignet est présenté dans une vidéo publiée sur le blog de Meta . Sans stylet ni autre périphérique de saisie , on y voit une personne écrivant « Hello World » avec son index sur une surface plane . De plus, l'appareil reconnaît des mouvements spécifiques et affiche un geste qui déplace un pointeur.

Les chercheurs peuvent désormais accéder à un nouvel ensemble de données comprenant des données sEMG de 300 participants effectuant trois tâches . Auparavant , Meta mettait à disposition du public ses ensembles de données contenant des enregistrements de tâches telles que la saisie de surface . L' entreprise affirme également qu'en s'adaptant à l' usage de chaque utilisateur , la technologie sous-jacente à son bracelet pourrait améliorer ses performances au fil du temps.

De plus, l' entreprise a souligné que les données sEMG pourraient aider les personnes souffrant de tremblements à saisir du texte ou à utiliser une interface tactile . Meta a également collaboré avec des institutions universitaires telles que l'Université Carnegie Mellon pour tester ces technologies auprès des personnes handicapées . 

Meta prévoit d'étendre les capacités de son bracelet sEMG à d'autres formes d'interaction, comme le contrôle d'objets en réalité augmentée (AR) et en réalité virtuelle (VR). L'objectif à long terme est de permettre une interaction fluide et naturelle avec des environnements numériques sans nécessiter de contrôleurs physiques.