成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

腦波解碼延遲僅80毫秒,實時「意念對話」技術登Nature子刊

人工智能 新聞
腦機接口的最新研究在社交網絡上引發了人們的熱烈討論,一位推特博主的帖子瀏覽量突破了 150 萬。

無法說話的人,現在可以通過大腦掃描的方式實時地用自己的聲音說話了。整個過程沒有延遲,也不需要打字,不用發出任何聲音。

本周,腦機接口的最新研究在社交網絡上引發了人們的熱烈討論,一位推特博主的帖子瀏覽量突破了 150 萬。

先來看效果。視頻中的受試者嚴重癱瘓,不能講話。她的大腦活動被解碼為目標句子,然后使用文本到語音模型一次合成一個單詞。

我們可以看到連接受試者頭部的設備(connector)。屏幕上出現了目標句子(target sentence),然后從大腦活動解碼文本,并應用「單詞級文本到語音合成」。

接下來是更多的示例:

論文一作 Kaylo T. Littlejohn 發推宣傳團隊的成果,他表示,這種流式「腦轉語音」(brain-to-voice)神經假體可以讓癱瘓患者恢復自然、流利和清晰的語言能力。

同時他強調,泛化能力至關重要,隨著快速改進設備,現在構建的解碼方法應能跨用例轉換(比如非侵入式與侵入式的權衡),并為未來的臨床語音神經假體打好基礎。

圖片

這項技術成果「?!乖谀睦??

要知道在此之前,最好的腦機接口系統也只能讓患者以每分鐘 8-14 個字的速度「打字」。而這個新系統輸出語音的速度可以達到每分鐘 90+ 個英文單詞,而且它不使用任何可聽見的訓練數據,用戶甚至不需要嘗試發出聲音。

該研究來自加州大學伯克利分校(UC Berkeley),已經登上了最新一期《自然》子刊 Nature Neuroscience。

圖片

  • 論文:A streaming brain-to-voice neuroprosthesis to restore naturalistic communication
  • 論文鏈接:https://www.nature.com/articles/s41593-025-01905-6

該系統轉錄的目標是患者大腦的言語運動皮層,采用 253 通道 ECoG 陣列,深度學習神經解碼器經過 2.3 萬次轉語音訓練,構建了延遲僅 80ms 的 RNN-T 架構,既可以合成語音也可以進行實時轉錄,音色模仿自患者受傷之前的錄音。

大多數腦機接口的系統在輸出任何內容之前都需要等待人想出完整句子,但在新的系統上,人類正在思考中的內容就可以被轉為語音,延遲大約為 1 秒。因此該系統可以稱得上是實時的意念轉語音了。

在實際測試中可以看到,語音轉錄的效果快速、流暢且準確:在 50 個短語集(護理需要)的測試中,新方法達到了 91 WPM 、12% 字錯率 (WER)、 11% 字符錯誤率。在 1024 字集的自然句子測試中,該方法也達到了 47 WPM、59% WER 和 45% 字符錯誤率。雖然還不是很準確,但已經證明了該系統的有效性。

圖片

此外,該系統成功地合成了在訓練過程中未曾見過的新詞匯。當給定 24 個新的詞匯,例如 Zulu、Romeo,它正確識別出這些詞匯的概率為 46%,而僅憑偶然猜測的概率為 3.8%。這一切僅通過神經活動就得以實現。

圖片

此外,該系統采用了統一的神經網絡架構,能夠跨多種技術平臺解碼語音信號,具體包括:

  • ECoG(皮層腦電圖),通過植入大腦表面的電極陣列讀取神經信號,無需穿透腦組織,創傷性較低;
  • MEA(皮層內微電極),通過植入大腦皮層的微型電極記錄單個神經元活動;
  • EMG(面部表面電極,無需手術)。

圖片

一直以來,很多研究僅僅局限于試驗階段,相比之下,該系統能夠持續工作,不需要預先編程就能夠通過大腦活動檢測到受試者何時開始和停止說話。研究者用時長 6 分鐘的連續無聲語音塊對其進行了測試。結果顯示,系統能夠準確解碼,幾乎沒有任何誤報。

圖片

這項研究的解碼速度達到了新的標桿,此前最佳解碼速度為 28 詞 / 分鐘(WPM),該系統的表現達到 90 詞 / 分鐘(WPM),且延遲更低。

更重要的是,受試者無需發聲,借助該系統,受試者用意念就能「說話」。

從臨床角度看,這項研究能讓失去語言能力的人重新獲得說話的權力。從技術角度看,它解決了實時、流暢的神經語音解碼問題。大家期待已久的無聲交流正在實現,這也表明了語言可以完全基于神經信號來傳達。

如果這項技術普及開來,我們可以想象 20 年后的世界,那將是不再需要手機、不再需要鍵盤、不再需要語音指令等等,你要做的只是思考,你的話語便能被實時感知。

責任編輯:張燕妮 來源: 機器之心
相關推薦

2013-11-11 11:17:45

AngularJS性能優化

2025-02-04 19:26:41

2020-04-27 10:37:53

機器翻譯腦機接口腦波

2012-03-11 15:27:57

微軟

2023-03-13 13:24:34

智能Nature

2017-10-31 15:28:27

RUDP傳輸優化實踐

2023-03-06 13:59:38

模型參數

2024-04-22 07:30:00

藥物分子模型

2021-03-05 14:56:31

技術人工智能透視術

2024-01-07 18:00:33

AI模型特點

2022-07-12 14:56:30

AI模型研究

2024-01-16 17:23:39

AI數據

2025-01-13 13:00:00

AI模型訓練

2024-02-04 09:20:00

AI量子計算

2023-04-12 15:58:58

2021-04-27 06:20:25

MySQL集群優化

2023-02-06 08:55:12

學習語言模型

2024-06-11 07:40:00

2021-12-31 14:30:30

人工智能機器學習技術
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 久久久久一区 | 玖玖色在线视频 | 欧美日韩一区不卡 | 亚洲不卡视频 | 国产在线二区 | 国产精品久久久久久久久免费桃花 | 午夜影晥 | 国产一区二区自拍 | 日韩国产在线 | 亚洲成人一级片 | 欧美日韩在线电影 | 亚洲成人精品 | 精品欧美一区二区三区久久久 | 国产午夜精品一区二区三区嫩草 | 欧美天堂 | 日韩精品一区二区三区在线 | 九九热精品视频在线观看 | 午夜精品91| 91在线精品播放 | 久草免费在线视频 | 一级做受毛片免费大片 | 久久精品日产第一区二区三区 | 国产亚洲一区二区三区在线 | 国产免费一区二区三区 | www.天天干.com | 日本不卡免费新一二三区 | 日韩成人精品一区 | 极品电影院| 中文字幕av一区 | 亚洲毛片在线 | 国产成人高清视频 | 久久国产精品久久久久久久久久 | 国产小视频在线 | 一区二区中文 | 国产女人叫床高潮大片免费 | 久草精品视频 | 亚洲一区二区三区欧美 | 蜜桃一区 | 一区二区视频在线 | 羞视频在线观看 | 国产乱码精品一区二区三区中文 |