Головна · Блог · Дослідження

Тримодальний ШІ передбачає активність мозку краще за традиційні моделі

Тримодальний ШІ передбачає активність мозку краще за традиційні моделі

Нова модель штучного інтелекту здатна передбачати активність людського мозку в сферах зору, слуху та мови з безпрецедентною точністю. Дослідники з Meta AI та академічних установ розробили TRIBE v2 — тримодальну фундаментальну модель, навчену на понад 1000 годин даних фМРТ від 720 учасників. Під час тестування на нових стимулах і завданнях вона в кілька разів перевершила традиційні лінійні моделі кодування, пропонуючи уніфікований підхід для когнітивної нейронауки.

Дослідження

Під керівництвом Стефана д'Асколі та колег дослідження (arXiv:2605.04326) представляє TRIBE v2 — модель, яка одночасно обробляє відео, аудіо та текст. Команда зібрала набір даних з понад 1000 годин фМРТ-записів високої роздільної здатності від 720 учасників, які дивилися фільми, слухали звуки та читали тексти. Модель навчали прогнозувати активність мозку на основі цих стимулів. У валідаційних експериментах TRIBE v2 точно передбачила реакцію мозку на абсолютно нові стимули та завдання — не лише ті, на яких вона навчалась. Вона також відтворила класичні результати десятиліть досліджень зорової та нейролінгвістики, демонструючи, що модель уловлює фундаментальні когнітивні процеси. Інтерпретуючи внутрішні репрезентації моделі, дослідники склали карту тонкої мультисенсорної інтеграції в мозку, показавши, де і як різні відчуття поєднуються.

Чому це важливо

Це дослідження важливе, оскільки воно поєднує ШІ та нейронауку, дозволяючи проводити in silico експерименти — тестувати теорії на комп'ютерній моделі замість лабораторії. Для тих, хто цікавиться власним пізнанням, це свідчить про те, що ШІ може допомогти розшифрувати, як ми обробляємо складні реальні стимули. Це також відкриває можливість створення персоналізованих моделей мозку, які можуть передбачити, як мозок конкретної людини реагує на різні типи інформації, що потенційно може спрямовувати освітні або тренувальні підходи.

Що ви можете зробити

Хоча ви не можете запустити TRIBE v2 вдома, ви можете дослідити, як ваш власний мозок обробляє мультимодальну інформацію, пройшовши когнітивні тести, що вимірюють пам'ять, увагу та міркування в різних сферах. Вправи для тренування мозку, які поєднують візуальні, слухові та мовні завдання, можуть допомогти покращити вашу когнітивну гнучкість. Для початку спробуйте наш безкоштовний адаптивний IQ-тест, щоб оцінити загальні когнітивні здібності, а потім досліджуйте доказові тренувальні модулі.

Джерело: arXiv q-bio.NC

Цікавитесь власним мозком? Пройдіть наш безкоштовний адаптивний IQ-тест або спробуйте 306 рівнів тренування мозку.

Цікавитесь власним IQ?

Пройдіть наш безкоштовний науково розроблений адаптивний тест за 7 когнітивними доменами. Без реєстрації.

Пройти безкоштовний тест