Новое исследование показывает, что компьютер может декодировать, какую визуальную категорию видит человек, просто по активности его мозга, используя глубокое обучение и данные с электродов, размещенных на поверхности мозга. Исследование, проведенное учеными из Университета Мельбурна и Университета Осаки, опубликованное на arXiv в июле 2026 года, демонстрирует многообещающий шаг к интерфейсам мозг-компьютер, которые могут помочь людям с параличом общаться или управлять устройствами.
Исследование
Команда, включая Стеллу Хо и Дэвида Б. Грейдена, проанализировала ранее собранный набор данных 17 участников с лекарственно-устойчивой эпилепсией, которым были установлены сетки электродов (электрокортикография, или ЭКоГ) на мозг для клинического мониторинга. Пока участники смотрели видеоклипы, представляющие различные визуальные категории (лица, объекты, сцены), исследователи записывали сигналы их мозга. Цель состояла в том, чтобы создать систему глубокого обучения, которая могла бы предсказывать, какую категорию смотрит человек, основываясь только на сигналах мозга.
Имея менее 50 обучающих примеров на категорию, исследователи протестировали несколько архитектур нейронных сетей. Лучшая система использовала кодер на основе Transformer, аугментацию данных mixup и входные данные высокочастотного гамма-диапазона (80-150 Гц), взятые из окна в 900 миллисекунд после начала видео. Модель показала хорошие результаты, несмотря на ограниченные данные, и, что важно, ее решения были интерпретируемыми: анализ показал, что наибольший вклад в декодирование внесли ранняя зрительная кора (V2-V4), вентральная зрительная кора, комплекс MT+ и латеральная височная кора. Эти области мозга, как известно, участвуют в зрительном восприятии, что согласуется с установленными нейронаучными данными.
Почему это важно
Это исследование показывает, что сквозное глубокое обучение может декодировать визуальную семантику из динамических видеостимулов без необходимости в ручных признаках. Интерпретируемость модели повышает доверие и может привести к созданию более практичных интерфейсов мозг-компьютер. Для обычного человека это исследование подчеркивает, как наш мозг обрабатывает визуальную информацию распределенным образом — и как искусственный интеллект может научиться читать эти паттерны. Хотя еще не готово к рынку, подобные методы однажды могут помочь людям с синдромом locked-in общаться или позволить управлять устройствами без помощи рук.
Что вы можете сделать
Вы можете поддерживать остроту своей зрительной системы, регулярно бросая ей вызов — попробуйте визуальные головоломки, игры на память или освойте новый навык, требующий зрительно-моторной координации. Взаимодействие со сложными визуальными стимулами, такими как просмотр и анализ видео или искусства, может помочь поддерживать нейропластичность.
Источник: arXiv q-bio.NC
Любопытны по поводу своего мозга? Пройдите наш бесплатный адаптивный IQ-тест или попробуйте 306 уровней тренировки мозга.
