MIT, Nyu-York universiteti va Stenforddan olimlar olib borgan yangi tadqiqot shuni ko'rsatdiki, ba'zi tasvirlar ko'rish va til AI modellarining dunyoni qanday ko'rishini tabiiy ravishda moslashtiradi — va bu moslashish bizning miyamizning hislarni birlashtirishini aks ettirishi mumkin.
Tadqiqot
Eghbal A. Hosseini, Brian Cheung, Evelina Fedorenko va Alex H. Williams boshchiligidagi jamoa turli ko'rish modellari individual tasvirlar bo'yicha qanchalik mos kelishini o'lchash uchun Generalized Procrustes Algoritmidan foydalangan. Ular turli vazifalarda o'qitilgan modellarni (masalan, yorliqsiz o'rganadigan DINOv2 va nazorat qilinadigan modellar) sinab ko'rdi va yuzlab tabiiy tasvirlarning ichki ko'rinishlarini solishtirdi. Har bir tasvir uchun ular intra-modal dispersiya ni (ko'rish modellarining qanchalik kelishmovchiligini) hisoblab chiqdi. Keyin ular o'zaro modal konvergentsiya ni o'lchadi: ko'rish modellari va til modellari (masalan, CLIP) o'rtasidagi moslashish.
Asosiy topilma: Past intra-modal dispersiyaga ega (kamroq talqin qilinadigan) tasvirlar ikki baravargacha yuqori o'zaro modal moslashishni keltirib chiqardi. Masalan, DINOv2 ni til modellari bilan juftlashtirganda, 'oson' tasvirlar uchun moslashish ikki baravar oshgan. Bu effekt bir nechta model juftliklari va tanlash mezonlarida saqlanib qoldi.
Nima uchun muhim
Sizning miyangiz doimo ko'rgan narsalarni eshitgan yoki o'qigan narsalar bilan birlashtiradi. Ushbu tadqiqot neyron tarmoqlar — va ehtimol, inson miyasi — eng aniq talqinga ega bo'lgan stimullarda eng kuchli birlashishini ko'rsatadi. Kundalik misollar orasida mushuk fotosurati (shubhasiz) va mavhum rasm (ko'p talqinlar) bor. Buni tushunish miya mashqlarini loyihalashda yordam berishi mumkin, bu esa o'zaro modal integratsiyani kuchaytiradi.
Siz nima qilishingiz mumkin
- Ko'rish-til aloqalarini mustahkamlash uchun oddiy, aniq tasvirlarni so'z bilan tasvirlashni mashq qiling.
- Vizual va og'zaki yoki yozma ishoralarni juftlashtiruvchi boshqotirmalarni sinab ko'ring — masalan, rasm-so'z moslash o'yinlari.
- Yangi tushunchani o'rganayotganda, noaniq emas, balki aniq, prototip misollarni qidiring.
Manba: arXiv q-bio.NC
O'z miyangiz haqida qiziqasizmi? Bepul adaptiv IQ testimizni o'ting yoki 306 ta miya mashqlari darajasini sinab ko'ring.
