扎克伯格憋了個大招!
剛剛,Meta 宣布了非侵入式腦機(jī)文本解碼器里程碑成果 Brain2Qwerty v2。
![]()
Meta 稱,“這是目前性能表現(xiàn)最優(yōu)的端到端處理流程”,能夠通過無創(chuàng)腦部記錄設(shè)備實(shí)時解析完整句子,準(zhǔn)確率已經(jīng)接近以往只有開顱手術(shù)植入設(shè)備才能達(dá)到的水平。
這也是Meta 去年發(fā)布的第一代Brain2Qwerty技術(shù)的升級。
Meta 同時將公開第一代與第二代Brain2Qwerty的全部訓(xùn)練代碼。
其合作方巴斯克認(rèn)知、大腦與語言研究中心(BCBL),也會對外開放第一代配套數(shù)據(jù)集。
據(jù)介紹,研發(fā)團(tuán)隊(duì)為9名志愿者開展了數(shù)據(jù)采集工作,每名受試者佩戴腦磁圖(MEG)設(shè)備、邊進(jìn)行文字輸入操作邊記錄腦部信號,單人記錄時長10小時,整體共采集約22000條句子樣本,用于第二代Brain2Qwerty模型訓(xùn)練。
![]()
該方案不再依靠人工設(shè)計(jì)流程,識別神經(jīng)活動信號,而是采用端到端深度學(xué)習(xí)技術(shù),直接從原始腦電波信號中解析文字信息。
研究團(tuán)隊(duì)基于神經(jīng)信號數(shù)據(jù)對大語言模型進(jìn)行微調(diào),讓系統(tǒng)能夠理解語義語境,彌補(bǔ)腦電記錄信號噪聲大、輸出語句不通順的問題。
同時,研究團(tuán)隊(duì)部署了 AI Agent ,對解碼流程進(jìn)行多輪優(yōu)化,然后由工程師人工敲定最終訓(xùn)練參數(shù)配置。
![]()
實(shí)測結(jié)果顯示,第二代Brain2Qwerty可以在神經(jīng)信號存在大量干擾的情況下,完整還原語句內(nèi)容,文字識別準(zhǔn)確率達(dá)到61%,相比其他無創(chuàng)方案8%的準(zhǔn)確率實(shí)現(xiàn)大幅提升。
表現(xiàn)最佳的受試者測試中,文字準(zhǔn)確率可達(dá)78%,半數(shù)以上句子解析結(jié)果的錯詞數(shù)量不超過1個。
研究同時發(fā)現(xiàn),解析準(zhǔn)確率會隨著數(shù)據(jù)量增長呈對數(shù)線性提升,這意味著僅依靠擴(kuò)充訓(xùn)練數(shù)據(jù)規(guī)模,就有望進(jìn)一步縮小該技術(shù)與手術(shù)植入方案之間的性能差距。
立體定向腦電圖、皮層腦電圖這類有創(chuàng)技術(shù)已經(jīng)證實(shí),通過神經(jīng)假體向人工智能解碼器傳輸腦部信號,可以幫助患者恢復(fù)表達(dá)能力,但這類方案很難大規(guī)模普及。而 Meta 研發(fā)的這項(xiàng)無創(chuàng)技術(shù),有望解決這一難題。
這對全球數(shù)百萬因腦部損傷喪失語言交流能力的人群而言,是個值得期待的科技福音。
![]()
該研究是 Meta 搭建開源大腦基礎(chǔ)模型體系的重要一環(huán),其配套項(xiàng)目包括用于感知信息編碼的Tribev2模型、大規(guī)模處理腦部數(shù)據(jù)的NeuralSet平臺,以及用于模型系統(tǒng)性測評的NeuralBench工具等。
Meta 近期還設(shè)立了專項(xiàng)基金,用于在數(shù)字大腦項(xiàng)目中扶持開源數(shù)據(jù)集建設(shè),以聯(lián)合行業(yè)各界共同推進(jìn)相關(guān)研發(fā)。
值得一提的是,同樣是腦機(jī)方向,Meta 選擇了與馬斯克的 Nerualink 不一樣的技術(shù)路徑。
后者是侵入式方案。通過R1手術(shù)機(jī)器人,把柔性電極植入大腦皮層內(nèi)部,芯片永久埋在顱骨下方,以采集單個神經(jīng)元放電信號。
Meta 則是無侵入式。依靠外部MEG腦磁圖、EEG腦電圖頭盔等,在頭皮外捕捉大腦磁場、電波信號。
進(jìn)程上,目前 Meta 仍停留在實(shí)驗(yàn)室階段,而Nerualink 已經(jīng)進(jìn)入臨床。
其臨床數(shù)據(jù)顯示,意念打字準(zhǔn)確率、打字速度等均優(yōu)于 Meta V2。比如,打字準(zhǔn)確率 Neuralink 可到 90% 以上。
當(dāng)然這也很容易理解,植入式方式對信號的捕捉會比非植入式要更直接。
邏輯上,Meta 的 AI 方案應(yīng)該可作為 Neuralink 技術(shù)方案的補(bǔ)充,以提升其準(zhǔn)確率。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.