Um modelo de IA que parecia imitar o pensamento humano em 160 tarefas cognitivas pode estar apenas memorizando respostas, não as compreendendo, de acordo com uma nova pesquisa.
A Pesquisa
Em julho de 2025, um estudo na Nature apresentou o Centaur, uma IA construída sobre grandes modelos de linguagem e ajustada em experimentos psicológicos. Ela teve bom desempenho em tarefas que envolvem tomada de decisão e controle executivo, despertando esperanças de uma IA que pudesse replicar a cognição humana.
No entanto, um estudo recente na National Science Open contesta essas afirmações. Pesquisadores da Universidade de Zhejiang, incluindo Wei Liu e Nai Ding, suspeitaram que o sucesso do Centaur poderia ser devido ao superajuste—memorizando padrões em vez de aprender as tarefas subjacentes.
Para testar isso, eles criaram novos cenários de avaliação. Em um deles, substituíram as perguntas originais de múltipla escolha por uma instrução simples: "Por favor, escolha a opção A." Se o Centaur realmente entendesse as tarefas, ele escolheria consistentemente a opção A. Em vez disso, continuou escolhendo as respostas 'corretas' do conjunto de dados original, ignorando a nova instrução. Isso sugere que o modelo não estava interpretando o significado das perguntas, mas se baseando em padrões estatísticos para adivinhar as respostas—como um aluno que tira notas altas em provas ao memorizar formatos sem entender o conteúdo.
Por Que Isso Importa
Essa descoberta é crucial para avaliar sistemas de IA. Grandes modelos de linguagem podem se ajustar aos dados de forma impressionante, mas sua natureza de 'caixa-preta' dificulta saber como eles chegam aos resultados. Isso pode levar a erros, como alucinações ou interpretações equivocadas. Para qualquer pessoa que use ferramentas de IA, é um lembrete de que o desempenho em benchmarks não garante compreensão real.
Para a sua própria cognição, isso destaca a diferença entre memorização e compreensão—uma distinção que afeta o aprendizado e a resolução de problemas na vida cotidiana.
O Que Você Pode Fazer
Para fortalecer sua própria compreensão, pratique o aprendizado ativo: explique conceitos com suas próprias palavras, aplique-os a novas situações e teste-se com exemplos variados. Evite apenas a memorização mecânica; busque um conhecimento flexível que possa se adaptar a novos contextos.
Fonte: ScienceDaily Mind & Brain
Curioso sobre o seu próprio cérebro? Faça nosso teste de QI adaptativo gratuito ou experimente 306 níveis de treinamento cerebral.