Lippenlesefehler sind keine zufälligen Aussetzer – sie folgen einer strukturellen Landkarte davon, wie Wörter auf dem Mund aussehen. Das ergab eine neue netzwerkwissenschaftliche Studie mit rund 20.000 englischen Wörtern.
Die Forschung
Michael Vitevitch, Professor für Sprach-, Sprech- und Hörwissenschaft an der University of Kansas, und seine Mitautoren veröffentlichten ihre Ergebnisse im Journal of the Acoustical Society of America. Statt Fehler wie die meisten früheren Arbeiten über den Klang zu analysieren, erstellte das Team eine visuelle Landkarte des englischen Wortschatzes auf Basis von Visemen – den charakteristischen Mund-, Kiefer- und Lippenformen, die gesprochenen Wörtern entsprechen.
„Wir haben uns auf die visuellen Merkmale konzentriert“, sagte Vitevitch. „Statt zu schauen, wie viele Laute eines Wortes die Leute erkannt haben, haben wir geschaut, wie viele der visuellen Merkmale – wir nennen sie ‚Viseme‘ – sie erkannt haben.“
Die Forscher fanden heraus, dass etwa ein Drittel der englischen Wörter beim Sprechen mit mindestens einem anderen Wort identisch aussieht, was für Lippenleser dauerhafte Wahrnehmungskonkurrenten schafft. Die visuelle Wortlandschaft ist nicht gleichmäßig verteilt – sie dehnt sich aus und zieht sich zusammen. Wörter mit hoher visueller Dichte drängen sich in eng gepackten Regionen, vervielfachen ähnlich aussehende Konkurrenten und senken die Lippenlesegenauigkeit.
Entscheidend ist: Die Fehler sind nicht zufällig. Ein Lippenleser verwechselt ein mehrdeutiges Wort strukturell eher mit einem häufiger verwendeten Wort innerhalb derselben komprimierten Netzwerkregion. Und die meisten Fehler sind knapp: Meist verfehlt man das richtige Ziel nur um ein oder zwei Viseme.
Man denke an Wörter wie „kit“, „cat“ und „cut“, die ähnlich klingen und aussehen. Oder „vet“, „fit“ und „fuzz“, die nicht gleich klingen, aber auf den Lippen dennoch gleich aussehen. Wenn man nur ein Gesicht beobachtet, wird die Unterscheidung zum kognitiven Flaschenhals.
Warum es wichtig ist
Diese Forschung ordnet Lippenlesefehler neu ein: als Merkmale des visuellen Sprachnetzwerks, nicht als Versagen von Aufmerksamkeit oder Können. Für Menschen mit Hörverlust ist das bedeutsam: Zu wissen, wo die visuellen Flaschenhälse liegen, könnte das Training gezielter machen. Es ist auch wichtig dafür, wie wir Wahrnehmung allgemein denken. Ihr Gehirn löst ständig Mehrdeutigkeiten aus unvollständigen Signalen auf, und die Struktur des Inputs – nicht nur Ihre Anstrengung – bestimmt, wo sich Fehler häufen. Das KU-Team überführt diese Netzwerkkarten bereits in klinische Trainingsprogramme für hörgeschädigte Menschen.
Dieselben Daten können auch helfen, multimodale KI-Transkriptionswerkzeuge – etwa für Videoanrufe – zu trainieren, indem Gesichtsverfolgung mit Audio kombiniert wird, um eine menschenähnlichere Genauigkeit zu erreichen.
Was Sie tun können
- Üben Sie Lippenlesen mit hochdichten Wortpaaren („kit/cat/cut“), um ein Bewusstsein für visuelle Flaschenhälse zu entwickeln.
- Kombinieren Sie beim Beobachten von Gesichtern visuelle Hinweise mit Kontext – komprimierte Regionen profitieren am meisten von Top-down-Vorhersage.
- Wenn Sie Wahrnehmungsfähigkeiten trainieren, konzentrieren Sie sich auf die Fehlerdistanz: Ein Visem näher heranzukommen, ist messbarer Fortschritt.
Quelle: Neuroscience News
Neugierig auf Ihr eigenes Gehirn? Machen Sie unseren kostenlosen adaptiven IQ-Test oder probieren Sie 306 Gehirntraining-Level.