Em um esforço para trazer ordem ao Velho Oeste da IA de atividade cerebral, pesquisadores introduziram o NeuralBench—um framework unificado para benchmarking de modelos que analisam gravações cerebrais. Os primeiros resultados desse esforço em larga escala mostram que os chamados modelos de fundação mal superam os específicos de tarefa, e que muitos desafios práticos, como decodificar pensamentos ou prever resultados clínicos, permanecem longe de serem resolvidos.
A pesquisa
Em um white paper publicado no arXiv, Hubert Banville e colegas de instituições como Facebook AI Research e Université Paris-Saclay descrevem o NeuralBench e seu conjunto de dados acompanhante, NeuralBench-EEG v1.0. A equipe agregou 36 tarefas de eletroencefalografia (EEG), 14 arquiteturas de deep learning e 94 conjuntos de dados, todos acessados por meio de uma interface padronizada. Este é o maior benchmark do tipo para modelos baseados em EEG.
Os resultados são sóbrios. Quando comparados entre si, os modelos de fundação—grandes modelos pré-treinados que podem ser ajustados para diferentes tarefas—apenas superaram ligeiramente os modelos treinados do zero para tarefas específicas. Além disso, mesmo os melhores modelos tiveram dificuldades com muitas tarefas: decodificação cognitiva (por exemplo, ler estados mentais) e previsões clínicas (por exemplo, detectar anormalidades) permaneceram altamente desafiadoras. Os autores observam que esses resultados destacam a necessidade de mais inovação, não apenas mais dados.
Por que isso importa
Para a pessoa comum interessada em seu próprio cérebro, essa pesquisa ressalta que as ferramentas de IA para análise cerebral ainda estão em sua infância. Embora mostrem promessa em ambientes controlados, sua confiabilidade em cenários do mundo real é limitada. Isso significa que devemos levar as alegações de IA lendo nossas mentes ou diagnosticando condições com um grão de sal. Por outro lado, o impulso para benchmarks padronizados como o NeuralBench acelerará o progresso, levando a melhores ferramentas para entender a cognição e a saúde cerebral no futuro.
O que você pode fazer
Você não precisa de um EEG para começar a entender seu cérebro. Testes cognitivos online, como os do iqgenio, podem dar um retrato da sua memória, atenção e habilidades de raciocínio. Acompanhar seu desempenho ao longo do tempo pode revelar padrões e ajudá-lo a direcionar áreas para melhoria. E enquanto a IA não lerá seus pensamentos tão cedo, você pode usar treinamento cerebral baseado em evidências para aprimorar sua mente.
Fonte: arXiv q-bio.NC
Curioso sobre o seu próprio cérebro? Faça nosso teste de QI adaptativo gratuito ou tente 306 níveis de treinamento cerebral.