Главная · Блог · Психология

Как иерархическая энергетическая модель объясняет мультимодальное познание

Новая вычислительная модель познания, названная IM-LEPP, интегрирует зрение и язык в иерархической энергетической структуре, предлагая единое объяснение внимания, понимания языка и памяти.

Исследование

Независимый исследователь Субир Варма предложил IM-LEPP (интегрированная мультимодальная латентная энергетическая предсказательная обработка) в статье, опубликованной на arXiv 8 августа 2026 года. Модель расширяет предыдущую одномодальную модель (LEPP) для обработки как визуальной, так и лингвистической информации. Опираясь на теорию о том, что генеративные нейронные сети служат эффективными теориями когнитивной динамики, IM-LEPP представляет познание как поток латентных состояний через изученные энергетические ландшафты, а не как симуляцию нейронных цепей.

Архитектура следует иерархии «hub-and-spoke», основанной на контролируемой семантической когнитивной структуре Ламбона Ральфа и др. В этой конструкции отдельные конвейеры предсказательного кодирования для визуальных объектов, сцен и языка сходятся в общем амодальном узле, смоделированном по образцу передней височной доли. Каждый конвейер сохраняет свою идентичность, находясь под влиянием текущего состояния узла, что позволяет каждому предсказанию отражать полный мультимодальный контекст.

Статья демонстрирует, что IM-LEPP может объяснить феномены внимания, такие как невнимательная слепота и бистабильность куба Неккера. Она также объясняет установленные психолингвистические данные, включая теорию сюрприза, компоненты ERP N400/P600 и переанализ предложений типа «садовой дорожки». Модель предлагает фальсифицируемое сравнение с языковыми моделями на основе трансформеров, подчеркивая различия в чувствительности к траектории при предсказании следующего слова. Кроме того, в статье обсуждается эффективное с точки зрения данных освоение языка по сравнению с LLM, описывается подсистема семантической/эпизодической памяти и рассматривается модель в контексте предсказательного кодирования, принципа свободной энергии, JEPA и иерархической временной памяти.

Почему это важно

Для обычного человека это исследование предполагает, что наш мозг интегрирует информацию от разных органов чувств предсказательным и энергоэффективным способом. Понимание этого может помочь объяснить, почему мы иногда упускаем очевидное (невнимательная слепота) или по-разному воспринимаем неоднозначные изображения (бистабильность). Это также проливает свет на то, как мы обрабатываем язык в реальном времени, включая реакцию мозга на неожиданные слова или грамматические ошибки. Эти знания могут использоваться для разработки практических стратегий улучшения внимания, памяти и изучения языка.

Что вы можете сделать

Чтобы использовать эти идеи, практикуйте активное наблюдение и осознанность для улучшения концентрации внимания. При изучении новой информации старайтесь связывать её с несколькими органами чувств (например, визуально и вербально), чтобы углубить запоминание. Развивайте языковые навыки, читая сложные или неоднозначные тексты, что тренирует предсказательные процессы вашего мозга.

Источник: arXiv q-bio.NC

Интересует ваш собственный мозг? Пройдите наш бесплатный адаптивный IQ-тест или попробуйте 306 уровней тренировки мозга.

Интересно узнать свой IQ?

Пройдите наш бесплатный научно разработанный адаптивный тест по 7 когнитивным доменам. Без регистрации.

Пройти бесплатный тест