Notebookcheck Logo

Un gant intelligent qui joue du piano et des jeux vidéo

Une technologie simple, un effet étonnant : le transfert de séquences de mouvements grâce à l'apprentissage automatique. (Image : Alex Shipps/MIT CSAIL)
Une technologie simple, un effet étonnant : le transfert de séquences de mouvements grâce à l'apprentissage automatique. (Image : Alex Shipps/MIT CSAIL)
Vous pouvez désormais apprendre des séquences de mouvements auprès des meilleurs. Cela semble être un raccourci rapide du processus laborieux d'apprentissage d'un instrument. Mais avec le gant intelligent présenté par des chercheurs du MIT, il est possible d'aller encore plus loin.

Interface homme-machine serait le terme correct pour désigner le nouveau gant. Il ne se contente pas de transférer les mouvements d'une main vers la réalité virtuelle ou, dans sa version de luxe, de fournir un retour d'information.

La technologie présentée par un groupe de recherche du MIT est fabriquée et adaptée spécifiquement à chaque personne. Grâce à un processus d'impression spécial, la procédure ne prendrait que 10 minutes.

En fait, une véritable mise en place n'est effectuée qu'après, ce qui implique bien sûr l'apprentissage automatique. Grâce à l'IA, les mouvements et l'haptique sont transférés via des capteurs entre différentes mains et différentes sensibilités.

Dans des démonstrations plus ludiques, la séquence de mouvements pour jouer du piano a été transmise d'un musicien expérimenté à un débutant. Les joueurs d'ordinateur sans expérience peuvent également maîtriser un jeu en leur transmettant le mouvement par l'intermédiaire d'un gant.

L'utilisation pratique de cette méthode n'a pas d'importance, c'est le principe qui compte. Mais cela devient vraiment passionnant lorsqu'un bras robotisé, qui n'est connecté que par vidéo, imite un mouvement exécuté avec le gant intelligent.

S'il y a ensuite un retour d'information concernant la résistance qui peut être ressentie, le véritable potentiel de l'invention intelligente devient apparent.

Cela commence par la formation des futurs pilotes ou chirurgiens pour leur apprendre des séquences de mouvements et leur faire sentir les machines ou même les tissus humains.

Il s'étend à l'utilisation de ces robots dans des environnements inhospitaliers, que ce soit dans un réacteur nucléaire en cours de démantèlement ou dans un haut-fourneau.

Enfin, il serait même envisageable de réaliser une opération avec un bras robotisé et peut-être même en présence d'un personnel médical. Cependant, le spécialiste lui-même est assis loin, mais il peut encore opérer grâce à un gant intelligent et à un retour d'information parfaitement coordonné - pour autant que le réseau mobile soit stable.

Il reste encore beaucoup d'améliorations et de développements à venir. Cependant, la combinaison d'un gant parfaitement adapté avec des capteurs et une intelligence artificielle pour une transmission optimale de l'haptique a déjà passé son premier test :

Une main robotisée a été capable de différencier correctement les différents types de pain au simple toucher. Si ce n'est rien.

Source(s)

Please share our article, every link counts!
Mario Petzold, 2024-02-23 (Update: 2024-02-23)