Eine neue Studie zeigt, dass ein einzelner allgemeiner Intelligenzfaktor die Leistung von Sprachmodellen weit weniger erklärt als gemeinhin angenommen – was darauf hindeutet, dass maschinelle Intelligenz nur teilweise interpretierbar ist.
Die Forschung
Die Forscher Faiz Ghifari Haznitrama, Afrizal Hasbi Azizy und Faeyza Rishad Ardi analysierten 13.251 veröffentlichte Bewertungsergebnisse von 1.618 Sprachmodellen über 456 verschiedene rein textbasierte Benchmarks hinweg. Mithilfe der Faktorenanalyse – einer aus der Psychometrie entlehnten Technik zur Dimensionsreduktion – untersuchten sie, ob die KI-Leistung um einen allgemeinen, domänenfreien Intelligenzfaktor herum organisiert ist, ähnlich der fluiden Intelligenz beim Menschen.
Der Datensatz war extrem dünn besetzt, das heißt, die meisten Modelle wurden nicht mit den meisten Benchmarks getestet. Um dies zu adressieren, triangulierten die Forscher ihre Analyse über verschiedene Datenverdichtungs- und Imputationsmethoden hinweg. Ein robustes Muster trat hervor: Ein allgemeiner Intelligenzfaktor erklärte in der großzügigsten Schätzung 70,8 % der Varianz in der Modellleistung und in den meisten Lösungen weit weniger. Inhaltlich ähnliche Benchmarks gruppierten sich nicht unbedingt zusammen, und der g-Faktor wurde von keinem gemeinsamen Thema dominiert. Entscheidend war, dass es an Belegen dafür mangelte, dass standardmäßige "Intelligenz"-Benchmarks diesen Faktor gut abbilden.
Warum es wichtig ist
Diese Ergebnisse stellen aktuelle Bemühungen infrage, allgemeine Intelligenz als greifbares Konstrukt in der Entwicklung von Sprachmodellen zu definieren, zu identifizieren und anzusteuern. Wenn Fähigkeiten erster Ordnung teilweise eigenwillig und in der Praxis nicht identifizierbar sind, dann ist die Ausrichtung auf eine einzelne konzeptuelle Fähigkeit nicht haltbar. Für alle, die sich für Kognition interessieren, spiegelt dies Debatten in der menschlichen Psychometrie wider: Allgemeine Intelligenz ist real, aber nicht die ganze Geschichte. So wie menschliche kognitive Fähigkeiten eine Mischung aus breiten und spezifischen Faktoren sind, könnte die maschinelle Leistung von vielen engen Fähigkeiten abhängen, die sich nicht auf eine einzige Zahl reduzieren lassen. Dies legt nahe, dass sowohl menschliche als auch maschinelle Intelligenz besser als Profile von Stärken statt als einzelner Rang verstanden werden sollten.
Was Sie tun können
Anstatt sich auf einen einzelnen IQ-Wert zu fixieren, erkunden Sie Ihr kognitives Profil. Machen Sie Tests, die verschiedene Bereiche messen – Gedächtnis, logisches Denken, verbale Fähigkeiten, räumliches Vorstellungsvermögen – und achten Sie darauf, wo Sie besonders gut abschneiden. Trainieren Sie dann gezielt diese spezifischen Bereiche mit Übungen. Dieser evidenzbasierte Ansatz respektiert die Komplexität echter Intelligenz, ob in Gehirnen oder Maschinen.
Quelle: arXiv q-bio.NC
Neugierig auf Ihr eigenes Gehirn? Machen Sie unseren kostenlosen adaptiven IQ-Test oder probieren Sie 306 Gehirntrainingsstufen.