Le bracelet permet aux humains de contrôler directement les robots avec des gestes de la main

25

Un nouvel appareil porté au poignet développé par les ingénieurs du MIT permet aux utilisateurs de contrôler intuitivement les mains robotiques – et même les interfaces numériques – en bougeant simplement leurs propres mains. La technologie utilise l’imagerie par ultrasons pour capturer les mouvements infimes des muscles et des tendons du poignet, puis traduit ces mouvements en commandes pour un homologue robotique en temps réel.

Comment ça marche : l’échographie comme interface de contrôle

Le cœur du système est un petit « autocollant échographique » placé sur le poignet. Cet autocollant ne mesure pas seulement le mouvement de la surface ; il voit sous la peau, imaginant l’interaction des muscles, des tendons et des ligaments. Le flux d’images échographiques qui en résulte alimente un algorithme d’IA formé pour reconnaître la corrélation entre ces mouvements internes et des gestes spécifiques de la main.

Il s’agit d’un pas en avant important car les robots ont longtemps eu du mal à maîtriser la dextérité et les nuances des mains humaines. Des tâches telles que peler une banane sans l’écraser restent un défi pour les machines, en raison de la difficulté de reproduire la coordination complexe de nos propres poignets et doigts. L’appareil du MIT contourne ce problème en capturant directement cette coordination d’un utilisateur humain.

Applications et tests du monde réel

Lors de tests, des volontaires portant le bracelet ont pu diriger une main robotique pour effectuer des tâches telles que saisir des balles de tennis, effectuer des gestes en langage des signes et même jouer des notes de piano. Le système est suffisamment précis pour distinguer les 26 lettres de la langue des signes américaine et traduire avec précision les gestes – comme un pincement – ​​en commandes numériques (comme une fonction de zoom).

Les implications s’étendent au-delà de la robotique. L’équipe pense que cette technologie pourrait remplacer le suivi manuel traditionnel dans la réalité virtuelle et augmentée, offrant une méthode de contrôle plus naturelle et immersive. Imaginez interagir avec des environnements VR sans contrôleurs physiques, simplement en bougeant vos mains.

Développement futur et mise à l’échelle

Actuellement, l’appareil est encore volumineux, ressemblant à un « gant cyberpunk » plutôt qu’à une montre intelligente élégante. L’équipe du MIT travaille à miniaturiser l’électronique. Ils prévoient également d’élargir leur ensemble de données de formation à l’IA pour inclure une plus large gamme de tailles et de formes de mains, garantissant ainsi une plus grande convivialité.

“Nous pensons que ces bandes à ultrasons portables peuvent fournir des commandes intuitives et polyvalentes pour la réalité virtuelle et les mains robotiques”, explique Xuanhe Zhao, professeur de génie mécanique au MIT.

À terme, l’objectif est de créer un appareil portable convivial, capable de contrôler à distance des robots avec la même facilité que de bouger ses propres doigts. Cette technologie pourrait révolutionner la façon dont les humains interagissent avec les machines, comblant ainsi le fossé entre notre dextérité naturelle et les limites des systèmes robotiques actuels.