La question est donc : pouvons-nous décoder les types de mouvements en fonction des signaux cérébraux provenant de mouvements imaginés ?
Il existe de nombreuses méthodes d'extraction des signaux cérébraux, la moins invasive (et en réalité non invasive) étant l'EEG (électroencéphalographie). Cependant, en raison de la localisation des électrodes sur le cuir chevelu, le signal est déformé par le cuir chevelu et le crâne. D'autres techniques plus invasives incluent l'EcoG (électrocorticographie), où les électrodes sont placées à la surface du cortex. Cette technique s'est avérée offrir une meilleure qualité de signal.
La question devient alors : pouvons-nous décoder les types de mouvements à partir des signaux cérébraux EcoG issus de mouvements imaginés ?
Un groupe d'étudiants a posé les bases de cette question lors d'un cours en ligne de neurosciences computationnelles appelé Neuromatch. Ils ont notamment développé un classificateur permettant de décoder les types de mouvements à partir de signaux EcoG imaginés et exécutés. Ce classificateur constituera la base de mon projet. Les données brutes proviennent d’une source publique ( Miller et al, 2019). Les données utilisées pour ce projet ont été téléchargées à partir d'une source prétraitée provenant du site web de Neuromatch Academy . Deux notebooks Jupyter : un pour le traçage 3D des cerveaux, et un pour le prétraitement, la classification et la visualisation des données des performances du classificateur. Un fichier requirements.txt. L’examen des données a été le point de départ. Ce faisant, j’ai constaté que le positionnement des électrodes variait selon les sujets. L’étude ayant été réalisée dans le cadre d’un monitorage épileptique préopératoire, l’emplacement des électrodes dépendait de la source approximative de l’épilepsie. Les cerveaux 3D avec les électrodes de chaque individu ont été représentés. Seules les électrodes présentes dans les gyrus précentraux et postcentraux ont été sélectionnées, car ces régions sont impliquées dans l’exécution et l’imagination du mouvement. Cliquez ici pour la version interactive : Les performances du classificateur sur chaque individu ont ensuite été tracées.
Les étapes suivantes visaient à améliorer la classification. Trois classificateurs ont été comparés.
Le premier, appelé SVM original, est une machine à vecteurs de support issue du projet NeuroMatch original.
Le deuxième, appelé SVM RFE, est une version modifiée du premier SVM, avec une standardisation des données supplémentaire et une sélection de caractéristiques (par RFE).
Le troisième, appelé Random Forest, est un classificateur de forêt aléatoire avec une standardisation des données et une sélection de caractéristiques par RFE.
Les trois classificateurs ont été comparés dans les conditions de mouvement réelles et imaginaires.
Pour le mouvement réel :
Cliquez ici pour la version interactive.
Pour le mouvement imaginé:
Cliquez ici pour la version interactive.
Heureusement, chaque individu disposait d’au moins un classificateur avec une précision supérieure à 50 %.
Pour revenir à la question initiale : peut-on décoder les types de mouvement à l’aide de signaux EcoG de mouvement imaginés ?
Les résultats de ce projet sont quelque peu peu concluants. Certains individus présentent une assez bonne précision de classificateur, mais le niveau de précision nécessaire pour confirmer que les types de mouvement sont décodables reste incertain.
Les causes possibles de ce manque de fiabilité sont : les données EcoG sont trop bruitées pour être correctement classées, les données sont insuffisantes et/ou l’imagination du mouvement n’était pas suffisamment fiable chez certains individus. Les futurs projets devraient expérimenter des techniques d’augmentation des données et différentes approches de classificateur.
- Volkova K, Lebedev MA, Kaplan A, Ossadtchi A. Decoding Movement From Electrocorticographic Activity: A Review. Front Neuroinform. 2019 Dec 3;13:74. doi: 10.3389/fninf.2019.00074. PMID: 31849632; PMCID: PMC6901702.
- Miller KJ. A library of human electrocorticographic data and analyses. Nat Hum Behav. 2019 Nov;3(11):1225-1235. doi: 10.1038/s41562-019-0678-3. Epub 2019 Aug 26. PMID: 31451738.
- Guillot A, Collet C, Nguyen VA, Malouin F, Richards C, Doyon J. Brain activity during visual versus kinesthetic imagery: an fMRI study. Hum Brain Mapp. 2009 Jul;30(7):2157-72. doi: 10.1002/hbm.20658. PMID: 18819106; PMCID: PMC6870928.
