Dans le but de mettre de l'ordre dans le Far West de l'IA dédiée à l'activité cérébrale, des chercheurs ont introduit NeuralBench, un cadre unifié pour évaluer les modèles qui analysent les enregistrements cérébraux. Les premiers résultats de cet effort à grande échelle montrent que les modèles dits de fondation surpassent à peine les modèles spécialisés pour des tâches spécifiques, et que de nombreux défis pratiques, comme décoder les pensées ou prédire des résultats cliniques, restent loin d'être résolus.
La recherche
Dans un livre blanc publié sur arXiv, Hubert Banville et ses collègues d'institutions comme Facebook AI Research et l'Université Paris-Saclay décrivent NeuralBench et son jeu de données associé, NeuralBench-EEG v1.0. L'équipe a regroupé 36 tâches d'électroencéphalographie (EEG), 14 architectures d'apprentissage profond et 94 jeux de données, tous accessibles via une interface standardisée. C'est le plus grand benchmark de ce type pour les modèles basés sur l'EEG.
Les résultats sont édifiants. Lorsqu'ils sont comparés, les modèles de fondation (de grands modèles pré-entraînés qui peuvent être affinés pour différentes tâches) ne surpassent que légèrement les modèles entraînés de zéro pour des tâches spécifiques. De plus, même les meilleurs modèles peinent sur de nombreuses tâches : le décodage cognitif (par exemple, la lecture des états mentaux) et les prédictions cliniques (par exemple, la détection d'anomalies) restent très difficiles. Les auteurs notent que ces résultats soulignent la nécessité de plus d'innovation, et pas seulement de plus de données.
Pourquoi c'est important
Pour la personne moyenne intéressée par son propre cerveau, cette recherche souligne que les outils d'IA pour l'analyse cérébrale en sont encore à leurs balbutiements. Bien qu'ils soient prometteurs dans des environnements contrôlés, leur fiabilité dans des scénarios réels est limitée. Cela signifie que nous devons prendre avec des pincettes les affirmations selon lesquelles l'IA pourrait lire dans nos pensées ou diagnostiquer des conditions. D'un autre côté, la promotion de benchmarks standardisés comme NeuralBench accélérera les progrès, conduisant à de meilleurs outils pour comprendre la cognition et la santé cérébrale à l'avenir.
Ce que vous pouvez faire
Vous n'avez pas besoin d'un EEG pour commencer à comprendre votre cerveau. Des tests cognitifs en ligne, comme ceux de iqgenio, peuvent vous donner un aperçu de votre mémoire, de votre attention et de vos capacités de raisonnement. Suivre vos performances au fil du temps peut révéler des schémas et vous aider à cibler les domaines à améliorer. Et même si l'IA ne lira pas encore vos pensées, vous pouvez utiliser un entraînement cérébral fondé sur des preuves pour aiguiser votre esprit.
Source : arXiv q-bio.NC
Curieux de découvrir votre propre cerveau ? Passez notre test de QI adaptatif gratuit ou essayez 306 niveaux d'entraînement cérébral.