Un homme muet parle : Un implant cérébral surpassant Neuralink transforme instantanément les pensées en paroles

Publiée par UC Davis Health le 11 juin, l'étude marque une avancée significative par rapport aux technologies précédentes qui se limitaient à traduire les signaux cérébraux en texte. Le nouveau système a rétabli un niveau de communication que l'on croyait impossible pour un volontaire de 45 ans atteint de sclérose latérale amyotrophique (SLA), une maladie neurodégénérative qui l'avait privé de sa voix.

La "neuroprothèse cerveau-voix" fonctionne en décodant l'intention du cerveau de parler. Les chercheurs ont implanté 256 microélectrodes dans la région du cerveau du patient responsable du contrôle des muscles de la parole. Lorsque l'homme tente de parler, l'ICB intercepte ces signaux et, avec l'aide d'un modèle d'IA avancé, les convertit en paroles audibles en seulement 25 millisecondes.

Les chercheurs ont utilisé des algorithmes d'IA avancés pour traduire l'activité cérébrale en parole synthétisée en temps réel. Le système a été entraîné à l'aide d'enregistrements neuronaux réalisés pendant que le participant essayait de lire des phrases affichées à l'écran. En alignant les schémas d'allumage de centaines de neurones sur les sons vocaux prévus, l'algorithme a appris à reconstruire avec précision la voix du participant directement à partir de ses signaux cérébraux.

L'ICB ne se contente pas de produire des mots monotones ; il capture et reproduit avec succès l'intonation vocale, c'est-à-dire les subtiles variations de hauteur et de ton qui sont fondamentales pour la communication du sens et des émotions chez l'homme. Au cours d'une série de démonstrations convaincantes, le patient a pu

• Poser des questions en générant une tonalité ascendante à la fin d'une phrase.
• Mettre l'accent sur des mots spécifiques pour changer complètement le sens d'une phrase, par exemple en mettant l'accent sur différents mots de la phrase : "Je n'ai jamais dit qu'elle m'avait volé mon argent".
• Chanter des mélodies simples à trois hauteurs, mettant en évidence un niveau élevé de contrôle neuronal sur la voix synthétisée.

Pour rendre l'avancée encore plus profonde, les chercheurs ont utilisé une IA de clonage de voix entraînée à partir d'anciens enregistrements du patient réalisés avant sa maladie. Le résultat a été une voix synthétisée qui ressemblait à la sienne, ce qui, selon le patient, "m'a rendu heureux et m'a donné l'impression d'être ma vraie voix"

Bien que cette technologie représente une avancée majeure, les chercheurs précisent qu'il s'agit encore d'une preuve de concept. Lors de tests au cours desquels des auditeurs humains ont transcrit la sortie de l'ICB, ils ont compris correctement ce que disait le patient dans 56 % des cas environ. D'autres développements seront nécessaires pour accroître l'efficacité de l'ICB.