記者6月9日從中國(guó)科學(xué)院自動(dòng)化研究所獲悉，該所與中國(guó)科學(xué)院腦科學(xué)與智能技術(shù)卓越創(chuàng)新中心的聯(lián)合團(tuán)隊(duì)在《自然·機(jī)器智能》發(fā)表相關(guān)研究，首次證實(shí)多模態(tài)大語(yǔ)言模型能夠自發(fā)形成與人類高度相似的物體概念表征系統(tǒng)，為人工智能認(rèn)知科學(xué)提供了新路徑，也為構(gòu)建類人認(rèn)知結(jié)構(gòu)的人工智能系統(tǒng)提供了理論框架。
“人類能夠?qū)ψ匀唤缰械奈矬w進(jìn)行概念化，這一認(rèn)知能力長(zhǎng)期以來被視為人類智能的核心。”論文通訊作者、中國(guó)科學(xué)院自動(dòng)化研究所研究員何暉光說，當(dāng)人們看到“狗”“汽車”或“蘋果”時(shí)，不僅能識(shí)別它們的物理特征，如尺寸、顏色、形狀等，還能理解其功能、情感價(jià)值和文化意義，這種多維度的概念表征構(gòu)成了人類認(rèn)知的基石。
而隨著ChatGPT等大語(yǔ)言模型的爆發(fā)式發(fā)展，一個(gè)問題引起科學(xué)家們的注意——這些大模型能否從語(yǔ)言和多模態(tài)數(shù)據(jù)中發(fā)展出類似人類的物體概念表征？
傳統(tǒng)人工智能研究聚焦于物體識(shí)別準(zhǔn)確率，卻鮮少探討模型是否真正“理解”物體含義。何暉光說：“當(dāng)前人工智能可以區(qū)分貓狗圖片，但這種‘識(shí)別’與人類‘理解’貓狗的本質(zhì)區(qū)別仍有待揭示?！?/p>
研究團(tuán)隊(duì)從認(rèn)知神經(jīng)科學(xué)經(jīng)典理論出發(fā)，設(shè)計(jì)了一套融合計(jì)算建模、行為實(shí)驗(yàn)與腦科學(xué)的創(chuàng)新范式，并構(gòu)建了人工智能大模型的“概念地圖”。
何暉光介紹，研究團(tuán)隊(duì)從海量大模型行為數(shù)據(jù)中提取出66個(gè)“心智維度”，并為這些維度賦予了語(yǔ)義標(biāo)簽。通過研究發(fā)現(xiàn)這些維度是高度可解釋的，且與大腦類別選擇區(qū)域的神經(jīng)活動(dòng)模式顯著相關(guān)。研究還對(duì)比了多個(gè)模型在行為選擇模式上與人類的一致性，結(jié)果顯示多模態(tài)大模型在一致性方面表現(xiàn)更優(yōu)。
此外，研究還揭示了人類在做決策時(shí)更傾向于結(jié)合視覺特征和語(yǔ)義信息進(jìn)行判斷，而大模型則傾向于依賴語(yǔ)義標(biāo)簽和抽象概念。本研究表明大語(yǔ)言模型內(nèi)部存在著類似人類對(duì)現(xiàn)實(shí)世界概念的理解。（記者宋晨）
編輯：余鳳
責(zé)任編輯：陳翠
編審：張宏彥
0