Нове дослідження показує, що комп'ютер може розшифрувати, яку візуальну категорію бачить людина, лише на основі її мозкової активності, використовуючи глибоке навчання та дані з електродів, розміщених на поверхні мозку. Дослідження, проведене вченими з Мельбурнського університету та Університету Осаки, опубліковане на arXiv у липні 2026 року, демонструє багатообіцяючий крок до інтерфейсів мозок-комп'ютер, які можуть допомогти людям з паралічем спілкуватися або керувати пристроями.
Дослідження
Команда, включаючи Стеллу Хо та Девіда Б. Грейдена, проаналізувала раніше зібраний набір даних від 17 учасників з лікарсько-стійкою епілепсією, які мали електродні сітки (електрокортикографія, або ЕКоГ), розміщені на їхньому мозку для клінічного моніторингу. Поки учасники дивилися відеокліпи, що представляли різні візуальні категорії (наприклад, обличчя, об'єкти, сцени), дослідники записували їхні мозкові сигнали. Метою було створити систему глибокого навчання, яка могла б передбачити, яку категорію дивиться людина, виключно на основі мозкових сигналів.
Маючи менше ніж 50 навчальних прикладів на категорію, дослідники протестували кілька архітектур нейронних мереж. Найкраща система використовувала кодувальник на основі Transformer, доповнення даних mixup та вхідні сигнали високо-гамма частотного діапазону (80-150 Гц) з вікна 900 мілісекунд після початку відео. Модель працювала добре, незважаючи на обмежені дані, і, що важливо, її рішення були інтерпретовані: аналіз показав, що найбільше сприяли декодуванню рання зорова кора (V2-V4), вентральний потік зорової кори, комплекс MT+ та латеральна скронева кора. Відомо, що ці ділянки мозку задіяні у зоровому сприйнятті, що узгоджується з усталеною нейронаукою.
Чому це важливо
Це дослідження показує, що наскрізне глибоке навчання може декодувати візуальну семантику з динамічних відеостимулів без необхідності ручних ознак. Інтерпретованість моделі зміцнює довіру і може призвести до більш практичних інтерфейсів мозок-комп'ютер. Для звичайної людини це дослідження підкреслює, як наш мозок обробляє візуальну інформацію розподіленим способом — і як штучний інтелект може навчитися читати ці патерни. Хоча ще не готовий до ринку, подібні методи можуть колись допомогти людям із синдромом замкненої людини спілкуватися або дозволити керування пристроями без допомоги рук.
Що ви можете зробити
Ви можете підтримувати свою власну зорову систему у формі, регулярно кидаючи їй виклик — спробуйте візуальні головоломки, ігри на пам'ять або вивчення нового навику, що вимагає координації рук та очей. Залучення до складних візуальних стимулів, таких як перегляд та аналіз відео чи мистецтва, може допомогти підтримувати нейропластичність.
Джерело: arXiv q-bio.NC
Цікавитесь власним мозком? Пройдіть наш безкоштовний адаптивний IQ-тест або спробуйте 306 рівнів тренування мозку.
