99国产精品欲av蜜臀,可以直接免费观看的AV网站,gogogo高清免费完整版,啊灬啊灬啊灬免费毛片

網易首頁 > 網易號 > 正文 申請入駐

AI又一突破!解碼人類思想,腦損傷患者能實現“無障礙”交流了?

0
分享至

對人類而言,溝通至關重要。然而,全球有數以萬計的人因腦損傷而無法實現正常交流。

腦損傷是指腦組織的異常,可由神經系統疾病或創傷性腦損傷(TBI)引起,導致各種神經功能缺損。此前發表在《柳葉刀神經病學》的研究顯示,2021 年全球有超過 30 億人患有神經系統疾病,如中風、阿爾茲海默癥、腦膜炎、癲癇和自閉癥譜系障礙等。此外,全球每年也約有 6900 萬人遭受著因道路交通事故等導致的創傷性腦損傷。

能否“修復”損傷的大腦,對于改善人類的日常生活和工作至關重要,且意義重大。

今天,Meta 公布了兩項重磅研究,他們聯合認知科學和神經科學頂尖研究機構巴斯克認知、大腦和語言中心(BCBL),采用非侵入式方法利用 AI 解碼大腦語言、并進一步理解人類大腦如何形成語言。這兩項突破性的研究成果也使得高級機器智能(Advanced Machine Intelligence, AMI)更加接近實現。

據介紹,第一項研究成功地通過非侵入式方法解碼了腦部活動中句子的生成,準確解碼了多達 80% 的字符,也就是說可以完全通過大腦信號重建想表達的完整句子;第二項研究則詳細介紹了 AI 如何幫助理解這些大腦信號,并闡明大腦如何有效地將思想轉化為一連串的文字

這不僅有助于幫助無法溝通的患者恢復語言能力,也幫助科學家加深對大腦處理語言和認知過程的理解,推動精度更高、更安全可靠的腦機接口(BCI)的開發。

從大腦活動到文本輸出:依靠非侵入式方法解碼

目前的方法表明,可以通過神經假體向 AI 解碼器輸入指令信號來恢復交流。然而,當前的立體定向腦電圖和皮層腦電圖等侵入式腦記錄技術需要神經外科干預,且難以推廣,非侵入式方法又通常受到其記錄信號的噪聲復雜性的限制。

第一項研究中,Meta 團隊提出了一種非侵入式方法來解碼大腦活動中的句子生成,并在 35 名腦部狀態健康的志愿者中證明了其有效性。

他們訓練了一個新的 AI 模型,可以解碼來自腦電圖(EEG)或腦磁圖(MEG)的句子,參與者則在 QWERTY 鍵盤上輸入簡短的句子。該 AI 模型可以解碼參與者用 MEG 記錄輸入的多達 80% 的字符,平均字符錯誤率(CER)為 32% ,大大優于傳統的 EEG(CER:67%)。對于表現最佳的參與者,該模型實現了 19% 的 CER,并且可以完美解碼訓練集之外的各種句子。

具體實驗設計如下:

參與者坐在投影屏幕前,MEG 和 EEG 分別距離眼睛 100 厘米和 70 厘米,鍵盤放在一個穩定的平臺上。M/EEG 傳感器與鍵盤之間的距離為 70 厘米,確保參與者能以自然的姿勢打字。每次實驗包括三個步驟:閱讀、等待、鍵入


圖|鍵入實驗設計

首先,準備好的句子在參與者面前的屏幕上逐詞顯示,以黑色大寫字體呈現在 50% 灰色背景上,持續時間在 465 至 665 毫秒之間,單詞之間沒有間隔。其次,在每個句子的最后一個單詞消失后,屏幕上會顯示一個黑色的固定十字,持續 1.5 秒,參與者被要求在 1.5 秒內記住這個句子。當十字從屏幕上消失后,參與者開始憑記憶輸入句子

在打字過程中,屏幕上不會顯示任何字母,但有最低限度的視覺反饋,即每按一次鍵,屏幕中央的黑色小方塊就順時針旋轉 10 度,有助于在不呈現按鍵輸入的情況下發出成功按鍵的信號,從而確保參與者最小化眼球運動。

參與者盡可能準確地鍵入句子,不使用空格糾錯,同時將注意力集中在屏幕中央,使用大寫字母且不帶重音。每次測試包括 128 個不重復的陳述性句子(西班牙語),每句話包含 5 到 8 個單詞,由定語、名詞、形容詞、介詞和動詞組成。在 EEG 中,參與者共輸入了 4000 個句子和 146000 個字符;在 MEG 中,共輸入了 5100 個句子和 193000 個字符。

接下來,他們對深度學習架構 Brain2Qwerty 進行了訓練,以解碼這些 M/EEG 信號中的單個字符。Brain2Qwerty 則通過三個核心階段從大腦活動中解碼文本:(1) 一個卷積模塊(convolutional module),輸入的是 500 毫秒窗口的 M/EEG 信號;(2)一個在句子層面上訓練的 transformer 模塊(3)一個預訓練的語言模型 ,用來糾正 transformer 模塊的輸出。性能評估使用的是句子層面的 CER。


圖|參與者輸入與基于 MEG 解碼的文本結果(標紅為錯誤部分)

他們評估了平均字符錯誤率 ,結果顯示,Brain2Qwerty 在 MEG 和 EEG 上的錯誤率分別為 32±0.6% 和 67±1.5% ,反映了不同記錄設備之間的巨大差異,表現最好和最差的 EEG 受試者在不同句子中的 CER 分別為 61±2.0% 和 71±2.3%,表現最好和最差的 MEG 受試者在各句子中的 CER 分別為 19±1.1% 和 45±1.2%。


圖|解碼表現較好的 EEG 和 MEG 文本對比,正確解碼字符標為藍色,錯誤為紅色

那么,相比于經典的基線架構,Brain2Qwerty 的性能如何呢?

為了解決這個問題,他們用同樣的方法訓練了線性模型和 EEGNet(一種用于腦機接口技術的流行架構),并通過跨受試者的 Wilcoxon 檢驗比較了它們與 Brain2Qwerty 的解碼性能。就 MEG 而言,EEGNet 在手誤率(HER)(p=0.008) 和 CER (p<10-4) 方面均優于線性模型,但就 EEG 而言,EEGNet 僅在 HER 方面優于線性模型(p=0.03)。然而,EEGNet 的效果仍然不如 Brain2Qwerty,相比之下,Brain2Qwerty 在 EEG 和 MEG 的 CER 上分別提高了 1.14 倍和 2.25 倍。

該項研究結果表明,侵入式和非侵入式方法之間的差距縮小,這也為開發安全的腦機接口開辟了道路。

從思想到語言的轉化:層次化的表征生成

第二項研究旨在理解協調人類大腦語言生成的神經機制

研究說話時的大腦活動對神經科學來說一直極具挑戰性,部分原因是存在一個簡單的技術問題:移動嘴巴和舌頭會嚴重干擾神經成像信號。

為了探索大腦如何將想法轉化為復雜的運動動作序列,Meta 團隊使用 AI 幫助解釋參與者輸入句子時的 MEG 信號。通過每秒拍攝 1000 張大腦快照,他們能夠精確定位思想轉化為單詞、音節甚至單個字母的準確時刻。

這一研究建立在第一項研究的輸入句子實驗基礎上,為了研究大腦何時以及是否會產生語言表征的層次結構,他們從這些信號(X)線性解碼了四個層次表征的向量嵌入(Y):上下文詞嵌入(使用 GPT-2),去上下文詞嵌入(使用 Spacy),音節嵌入(使用 FastText)以及字母(使用 One-Hot-Encoder,OHE),使用皮爾遜相關系數評估解碼性能。


圖|左為實驗設計,右為解碼層次

研究結果表明,大腦在產生語言時采用層次化的過程,首先生成上下文表征,然后依次生成詞匯、音節和字母表征,證實了語言理論的層次預測:大腦會產生一系列表征,產生每個單詞之前的神經活動以上下文、單詞、音節和字母級表征的連續上升和下降為標志,并逐漸將它們轉化為無數的動作,例如鍵盤上的實際手指運動。

此外,這項研究還揭示了大腦如何連貫而同時地表達連續的單詞和動作。研究結果表明,大腦使用一種“動態神經代碼”——一種特殊的神經機制,它可以鏈接連續的表達,同時在很長一段時間內保持每個表達。


圖 | 輸入每個單詞前大腦產生的語言表征層次

然而,Meta 團隊也表示,這些研究也存在一些局限性。

例如,當前的解碼性能仍不夠完善,線性解碼算法可能無法捕捉大腦活動的復雜性,需要更復雜的解碼算法;且還不適用于實時解碼,需要開發實時架構。在實用層面上,MEG 要求受試者處于磁屏蔽室中并保持靜止。此外,使用打字任務來探究語言產生的神經機制,可能無法完全反映自然語言產生的神經機制,研究也主要在健康的參與者中進行,還需要進一步研究在腦損傷患者中的適用性。

催生“無障礙交互”新范式

交流是人類活動的重要內容,用技術解決交流能力失去或缺陷的問題,一直是科技先驅關注的前沿。

近年來,全球腦機接口技術正在快速跨越科幻與現實的邊界。例如,侵入式腦機接口技術已在運動控制和語言解碼等方面取得突破,馬斯克的 Neuralink 公司利用 Link 芯片,使癱瘓患者能以意念操控機械臂完成復雜動作;而腦機接口與 AR/VR 融合的多模態交互技術也在不斷發展,Synchron 公司通過腦機接口操控 Apple Vision Pro 的案例,為消費級應用帶來了無限遐想。同時,非侵入式腦機接口技術因無需手術、低風險的特點,更適合大規模應用,也取得了顯著進步。

此外,AI 模型的引入有望徹底提升解碼效率和優化醫療決策,未來或能借助 LLM 實時解析腦電信號,將零散的神經活動轉化為連貫語言,甚至實現與外部 AI 系統的直接交互,從而催生“無障礙交互”新范式。

對此,你怎么看呢?

https://ai.meta.com/blog/brain-ai-research-human-communication/

https://ai.meta.com/research/publications/from-thought-to-action-how-a-hierarchy-of-neural-dynamics-supports-language-production/

https://ai.meta.com/research/publications/brain-to-text-decoding-a-non-invasive-approach-via-typing/

https://www.who.int/news/item/14-03-2024-over-1-in-3-people-affected-by-neurological-conditions--the-leading-cause-of-illness-and-disability-worldwide

作者:董怡楠????

如需轉載或投稿,請直接在公眾號內留言????

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
特朗普終于有臺階了? 中方開出三大條件,兩岸統一已指日可待

特朗普終于有臺階了? 中方開出三大條件,兩岸統一已指日可待

愛看劇的阿峰
2025-04-26 10:49:16
中美貿易越打越兇,我國存在美國的黃金六百余噸,還能要回來嗎?

中美貿易越打越兇,我國存在美國的黃金六百余噸,還能要回來嗎?

百態人間
2025-04-17 16:23:57
董大姐拒聘海歸惹眾怒,間諜頻現已成事實,不能低估西方的手段

董大姐拒聘海歸惹眾怒,間諜頻現已成事實,不能低估西方的手段

君明觀世界
2025-04-27 01:05:04
日本網上瘋傳“4·26東京8.3級大地震”

日本網上瘋傳“4·26東京8.3級大地震”

揚子晚報
2025-04-25 20:14:21
皮爾斯:我給哈登很多贊賞 原以為喬治走了快船的窗口會關閉

皮爾斯:我給哈登很多贊賞 原以為喬治走了快船的窗口會關閉

直播吧
2025-04-26 20:20:15
突然起火!北京全市車主趕緊檢查!

突然起火!北京全市車主趕緊檢查!

美麗大北京
2025-04-26 18:19:05
胡伯說每火化30具尸體,就有一具是活的,我問法醫后才得知真相!

胡伯說每火化30具尸體,就有一具是活的,我問法醫后才得知真相!

貓眼觀史
2025-04-16 10:57:05
38歲趙麗穎在上海逛街,素顏憔悴疲憊,旁邊表妹很青春但沒她好看

38歲趙麗穎在上海逛街,素顏憔悴疲憊,旁邊表妹很青春但沒她好看

史行途
2025-04-26 11:20:46
尤文圖斯或迎陣容大換血:無緣歐冠恐觸發全員清洗

尤文圖斯或迎陣容大換血:無緣歐冠恐觸發全員清洗

星耀國際足壇
2025-04-27 01:01:29
世錦賽8強決出1席!趙心童領先,肖國棟戰平希金斯,丁俊暉將出戰

世錦賽8強決出1席!趙心童領先,肖國棟戰平希金斯,丁俊暉將出戰

小李子愛體育
2025-04-26 12:00:45
逼死劉啟不久,母親竇漪房隨即身亡,劉徹:立即處死她的侄子竇嬰

逼死劉啟不久,母親竇漪房隨即身亡,劉徹:立即處死她的侄子竇嬰

史筆似塵鉤
2025-04-26 23:00:26
遼寧備戰G1!楊鳴調侃王博,弗格眼神堅定,張鎮麟韓德君無不適!

遼寧備戰G1!楊鳴調侃王博,弗格眼神堅定,張鎮麟韓德君無不適!

籃球資訊達人
2025-04-26 14:07:20
震驚!景德鎮車禍背后隱藏的真相曝光,網友怒吼:兇手必遭報應!

震驚!景德鎮車禍背后隱藏的真相曝光,網友怒吼:兇手必遭報應!

小毅說事
2025-04-26 19:03:05
王鷗的孩子已經1歲多了,何九華在綜藝節目首度公開:我還沒結婚

王鷗的孩子已經1歲多了,何九華在綜藝節目首度公開:我還沒結婚

歸史
2025-04-20 12:56:59
澤連斯基對華指控升級:俄竊取中國技術;中國在俄境內生產無人機

澤連斯基對華指控升級:俄竊取中國技術;中國在俄境內生產無人機

頭條爆料007
2025-04-23 22:32:24
暗黑界“一姐”的蛻變之路:Anna Claire Clouds的突圍

暗黑界“一姐”的蛻變之路:Anna Claire Clouds的突圍

吃瓜黨二號頭目
2025-04-23 09:14:21
恒大有多奢侈?高管的2小時工作日常,說明一切!

恒大有多奢侈?高管的2小時工作日常,說明一切!

愛看劇的阿峰
2025-04-27 01:18:23
外交部:高度贊賞阿盟外長理事會會議通過對華友好決議

外交部:高度贊賞阿盟外長理事會會議通過對華友好決議

新華社
2025-04-25 18:18:46
績效一降再降,安徽某市縣二甲,醫技科室待遇分享

績效一降再降,安徽某市縣二甲,醫技科室待遇分享

老莊聊薪水
2025-04-26 18:54:00
湖南4歹徒綁架女富豪,將其監禁并強奸,3天后歹徒卻被她嚇到報警

湖南4歹徒綁架女富豪,將其監禁并強奸,3天后歹徒卻被她嚇到報警

罪案洞察者
2025-04-08 10:03:59
2025-04-27 05:24:49
學術頭條
學術頭條
致力于學術傳播和科學普及,重點關注人工智能、生命科學等前沿科學進展。
1247文章數 5069關注度
往期回顧 全部

科技要聞

百度心響實測:“能用版Manus”開了個好頭

頭條要聞

特朗普將舉行集會慶祝執政100天 美媒:時機不妙

頭條要聞

特朗普將舉行集會慶祝執政100天 美媒:時機不妙

體育要聞

廣廈19分勝遼寧獲開門紅 孫銘徽13分3助崴腳

娛樂要聞

金掃帚獎出爐,包貝爾意外獲“影帝”

財經要聞

韓國的"宇樹科技" 是怎樣被財閥毀掉的?

汽車要聞

充電5分鐘續航100公里 探訪華為兆瓦超充站

態度原創

時尚
教育
旅游
家居
軍事航空

她美得好邪乎,讓人又怕又愛

教育要聞

你說說看,你做做這樣也可以嗎?

旅游要聞

熱聞|清明假期將至,熱門目的地有哪些?

家居要聞

清徐現代 有溫度有態度

軍事要聞

白宮爭吵后特朗普與澤連斯基"首度"碰面

無障礙瀏覽 進入關懷版 主站蜘蛛池模板: 梁山县| 民乐县| 河间市| 凤山市| 咸宁市| 永济市| 绩溪县| 寻甸| 务川| 白玉县| 高台县| 乌恰县| 贺州市| 当涂县| 岫岩| 宣城市| 泾源县| 都昌县| 安宁市| 大化| 前郭尔| 中西区| 滨海县| 湘潭市| 扎囊县| 晋江市| 百色市| 麦盖提县| 彭阳县| 礼泉县| 武邑县| 望奎县| 莱西市| 邵阳市| 阳朔县| 韩城市| 益阳市| 兴文县| 甘洛县| 乐山市| 炉霍县|