華人團隊用大模型實現(xiàn)“讀心術(shù)”:大腦活動直接變文字 | NeurIPS 2023
AIGC動態(tài)歡迎閱讀
原標(biāo)題:華人團隊用大模型實現(xiàn)“讀心術(shù)”:大腦活動直接變文字 | NeurIPS 2023
文章來源:量子位
內(nèi)容字?jǐn)?shù):3126字
內(nèi)容摘要:
克雷西 發(fā)自 凹非寺量子位 | 公眾號 QbitAINeurIPS收錄的一項新研究,讓大模型也學(xué)會“讀心術(shù)”了!
通過學(xué)習(xí)腦電波數(shù)據(jù),模型成功地把受試者的腦電圖信號翻譯成了文本。
而且整個過程不需要大型設(shè)備,只要一塊特制的“頭巾”就能實現(xiàn)。
這項成果名為DeWave,能在不通過侵入式設(shè)備和MRI的情況下解讀腦電波并翻譯成文本。
由于用了大模型來讀腦,因此報道DeWave的iFLScience也管它叫BrainGPT。
DeWave雖然不是最早實現(xiàn)腦電波解碼的技術(shù),但是它第一個做到了非侵入且無需MRI的腦電波-文本轉(zhuǎn)換。
如果能夠規(guī)模化運用,DeWave將為腦部癱瘓的人群提供交流上的幫助。
那么,DeWave的表現(xiàn)到底怎么樣呢?
測評成績超SOTA由于DeWave采用非侵入式方法,信號中的噪聲更強,解析難度更高,但相比于此前的SOTA方法,DeWave的測試成績還是有所提高。
研究團隊采用了公開的ZuCo數(shù)據(jù)集,其中包含了一萬多個不重復(fù)的句子;受試者進行自然閱讀的同時,研究團隊對他們的腦信號和正在閱讀的文本進行記錄。腦電波信號采樣頻率為500Hz,包含128個信道。
如果輸入的EEG信息
原文鏈接:點此閱讀原文:華人團隊用大模型實現(xiàn)“讀心術(shù)”:大腦活動直接變文字 | NeurIPS 2023
聯(lián)系作者
文章來源:量子位
作者微信:QbitAI
作者簡介:追蹤人工智能新趨勢,關(guān)注科技行業(yè)新突破