Brain-IT reconstruit des images à partir de l’IRM

MMarc

Des chercheurs de l’Institut Weizmann ont conçu Brain-IT, un modèle qui reconstitue des images à partir de mesures de l’activité cérébrale par imagerie par résonance magnétique fonctionnelle, selon Brief IA. Le système peut aussi estimer la réponse cérébrale à une image présentée au sujet. Pour son entraînement, l’équipe a utilisé des milliers de scans du Natural Scenes Dataset, constitués à partir des données de 8 volontaires. Les chercheurs ont également distingué 128 régions fonctionnelles liées à différents contenus visuels. Lorsqu’il est adapté à une nouvelle personne, une heure de données d’imagerie suffit, affirme l’équipe, pour atteindre des résultats comparables à ceux de méthodes qui nécessitent 40 heures d’enregistrements. Cette comparaison porte sur la quantité de données nécessaires pour obtenir des résultats similaires. Elle ne signifie pas que l’imagerie par résonance magnétique fonctionnelle devient inutile : Brain-IT dépend actuellement de cette technologie pour mesurer l’activité cérébrale. Les chercheurs étudient des prolongements vers l’électroencéphalographie et le son. Le décodage des rêves reste, lui, une hypothèse, notamment parce que les scans par imagerie par résonance magnétique sont lents. Pour l’instant, le modèle reconstruit donc des images à partir de signaux cérébraux mesurés par imagerie, et ses usages restent liés à cette méthode.