Eine neue Studie zeigt, wie sich menschliches Lesen von KI-Sprachmodellen unterscheidet, obwohl beide zunächst auf der Vorhersage des nächsten Wortes beruhen. Die Forscher fanden heraus, dass LLMs zwar die anfängliche Worterkennungsgeschwindigkeit vorhersagen können, aber nicht erklären, warum wir komplexe Sätze erneut lesen.
Die Forschung
Unter der Leitung von William Timkey von der New York University und Brian Dillon von der University of Massachusetts Amherst verglich die in den Proceedings of the National Academy of Sciences veröffentlichte Studie Eye-Tracking-Daten von 368 erwachsenen Lesern mit den Vorhersagen von über 400 neuronalen Netz-Sprachmodellen. Sie verwendeten syntaktisch komplexe Texte, einschließlich sogenannter „Garden-Path“-Sätze wie „The old man the boat“.
Die Ergebnisse zeigten, dass LLMs die frühe Worterkennung beim flüssigen Vorwärtslesen genau modellieren. Sie unterschätzten jedoch erheblich die Verarbeitungszeit, die benötigt wird, um Wörter in den Kontext zu integrieren, insbesondere wenn Mehrdeutigkeiten auftreten. Tatsächlich machen regressive Augenbewegungen – wenn unsere Augen zurückgehen, um erneut zu lesen – etwa 20 % der Lesefixierungen aus. Standard autoregressive LLMs haben keinen gleichwertigen Mechanismus für diese retrospektive Neuverarbeitung.
„Sprachmodelle entwickeln ihre bemerkenswerten Sprachverständnisfähigkeiten, indem sie darauf trainiert werden, das nächste Wort vorherzusagen“, erklärte Timkey. „Wir fanden heraus, dass LLMs erklären können, wie lange Menschen brauchen, um Wörter zu erkennen, wenn ihre Augen flüssig vorwärts gehen, aber sie können Fälle nicht erfassen, in denen Menschen Schwierigkeiten haben, ein Wort in einen größeren Kontext zu integrieren.“
Warum das wichtig ist
Diese Forschung gibt Einblicke in unsere eigene kognitive Architektur. Sie zeigt, dass menschliches Verständnis nicht nur ein Einbahnstraßen-Fluss der Wortvorhersage ist; es beinhaltet dynamische, mehrstufige Integration, die KI noch nicht gemeistert hat. Die Lücke zu verstehen, könnte zu besseren KI führen und uns auch helfen, Lesestörungen zu verstehen.
Was du tun kannst
Wenn du dich das nächste Mal dabei ertappst, einen Satz erneut zu lesen, wisse, dass dein Gehirn etwas Komplexes tut, das KI nicht replizieren kann. Um diese Fähigkeit zu stärken, versuche, anspruchsvolleres Material zu lesen und das Gelesene bewusst zusammenzufassen – das trainiert deine Kontextintegrationsfähigkeiten.
Quelle: Neuroscience News
Neugierig auf dein eigenes Gehirn? Mache unseren kostenlosen adaptiven IQ-Test oder probiere 306 Gehirntrainings-Level.
