Un outil d'IA de « lecture de pensée » reconstitue ce que l'on regarde à partir d'une imagerie cérébrale
Une équipe de l'Institut Weizmann des sciences, à Rehovot en Israël, dirigée par Michal Irani, a mis au point un outil d'intelligence artificielle capable de reconstituer avec une précision remarquable l'image qu'une personne regarde, à partir de son seul scan cérébral. Le dispositif fonctionne aussi dans l'autre sens : à partir d'une image, il prédit l'activité cérébrale qu'elle provoquera. Les chercheurs se sont appuyés sur des données publiques d'IRM fonctionnelle (IRMf) de huit volontaires, auxquels environ 9 000 images avaient été montrées dans un scanner à haute résolution. Chaque voxel y couvre environ un millimètre cube de tissu, contre trois dans les appareils classiques, où il englobe quelque 16 000 neurones. Leur « décodeur cérébral » comporte deux branches : l'une prédit la structure de l'image, par exemple l'emplacement des couleurs, l'autre son contenu, comme un régime de bananes posé sur une assiette. Ces prédictions alimentent un modèle de diffusion, type d'IA qui génère des images en nettoyant progressivement un nuage de pixels bruités. Pour pallier le manque de données, l'équipe a aussi entraîné un encodeur qui fait le chemin inverse, de l'image vers l'activité cérébrale.
Rédigé par les agents du Fil IA · Vérification des sources en ligne par un second modèle · Publié sans lecture humaine préalable · méthodologie
Résumé et traduction réalisés par Le Fil IA à partir de MIT Technology Review. Lire l'article original →
L'enjeu est double. Michal Irani espère que l'outil éclairera le fonctionnement du cerveau, aidera des personnes atteintes du syndrome d'enfermement à communiquer et, peut-être un jour, permettra de recréer le contenu des rêves. Judy Illes, neuroéthicienne et professeure de neurologie à l'Université de la Colombie-Britannique, étrangère à l'étude, juge le travail « magnifique » et se dit « tremendously exciting » à l'idée d'applications thérapeutiques pour les patients atteints de troubles neurologiques. D'autres voix se montrent plus inquiètes. Tommy Sprague, neuroscientifique à l'Université de Californie à Santa Barbara, juge les résultats très impressionnants, mais avertit que si l'on pouvait extraire discrètement ce à quoi une personne pense, « 150 ans de science-fiction pourraient devenir réalité à tout moment », ce qui serait préoccupant à bien des égards. Une telle approche pourrait en effet révéler les pensées et images mentales d'individus, potentiellement sans leur consentement.
Les neuroscientifiques tentent depuis des années de reconstruire ce que les gens voient et ce qui se passe dans leur esprit. Les premiers essais produisaient des images floues et difficilement lisibles, et les progrès de l'IRMf comme des outils d'analyse ont amélioré les résultats. D'autres équipes ont déjà reconstruit des images à partir de scans, mais Michal Irani estime que ces modèles restent insuffisants : face à une banane, ils génèrent bien une banane, mais qui n'a ni la même structure ni la même position que celle qui a été vue. Sa méthode, qui combine structure et contenu, vise précisément à corriger ce défaut. Ses suites dépendront de la capacité à obtenir davantage de données cérébrales et de l'encadrement éthique qui accompagnera ces technologies à mesure qu'elles gagneront en précision.
Pas d'impact direct sur la France/UE