Un prototype de système est développé en seulement 48 heures lors d’un hackathon.
Une équipe d’étudiants a mis au point un système d’IA capable de guider les mouvements de la main humaine grâce à la stimulation électrique des muscles.
PUBLICITÉ
PUBLICITÉ
Des étudiants en génie logiciel du Massachusetts Institute of Technology (MIT), aux États-Unis, ont développé un dispositif portable baptisé Human Operator, en combinant modèles d’IA, caméras et matériel de stimulation musculaire au sein d’un même système.
« Nous avons donné un corps à l’IA », explique l’équipe à l’origine de Human Operator sur le site du projet.
« Human Operator est un outil d’augmentation humaine qui permet à l’IA de prendre brièvement le contrôle de votre corps pour vous aider à apprendre ou à accomplir des choses que vous ne pouvez pas faire ».
Dans des démonstrations mises en ligne par l’équipe, l’appareil guide les utilisateurs pour faire signe de la main, jouer des notes au piano ou encore réaliser le geste de la main « OK » grâce à la stimulation musculaire.
En s’appuyant sur un modèle de vision et langage, ou VLM, le dispositif analyse l’environnement via une caméra fixée sur la tête et convertit les commandes vocales en réponse physique en stimulant les muscles du bras de l’utilisateur, selon l’équipe.
Les VLM sont des systèmes d’IA entraînés à traiter simultanément des images et du langage.
Dans Human Operator, le modèle interprète ce que l’utilisateur demande ainsi que les objets ou l’environnement visibles via le flux de la caméra, expliquent ses concepteurs.
À partir de ces informations, le système détermine quel mouvement de la main ou du poignet doit être effectué.
Des électrodes de stimulation électrique des muscles (EMS), fixées au poignet ou à l’avant-bras de l’utilisateur, délivrent alors de petites impulsions électriques qui activent des muscles précis.
La technologie EMS est déjà largement utilisée dans certains dispositifs de physiothérapie et d’assistance.
Associés à l’IA, ces outils d’interface avec le corps pourraient à terme faciliter l’apprentissage de gestes physiques ou les exercices de rééducation.
Human Operator est un prototype développé lors d’un hackathon de 48 heures. L’équipe à l’origine du projet a remporté la catégorie Learn Track du hackathon MIT Hard Mode 2026.