自計算機誕生以來,人機輸入技術始終在「便攜性、帶寬與普適性」之間艱難權衡:鍵盤、鼠標 與觸控雖已成熟,卻都離不開實體設備;視覺或慣性手勢雖可擺脫器件,但對光照、遮擋極為敏感。腦?機接口曾被寄望解決這一困境,卻長期局限于侵入式電極、專人專模的昂貴路線。
鑒于此,腦機接口初創公司 CTRL-Labs聯合創始人Patrick Kaifosh與Thomas Reardon提出了一種可穿戴、干電極、腕帶式表面肌電(sEMG)接口。通過在成千上萬名志愿者身上采集高質量訓練數據,研究者訓練出可跨人群通用的解碼模型,使用戶在零校準狀態下即可完成連貫手勢導航(0.66 次目標獲取·s?1)、離散指令(0.88 次檢測·s?1)和手寫輸入(20.9 詞·min?1),若再用20 min個性化數據微調,手寫錯誤率還能再降16%。相關研究成果以題為“A generic non-invasive neuromotor interface for human-computer interaction”發表在最新一期《nature》上。 全文作者達到247人。
![]()
值得一提的是, CTRL-labs 由Thomas Reardon和Patrick Kaifosh創立,他們兩位都獲得了哥倫比亞大學的神經科學博士學位。在這其中,年僅 49 歲的雷登是擔任 CTRL-labs 公司 CEO 職位。2019年,Facebook AR / VR 副總裁安德魯·博茲·博斯沃思(Andrew "Boz" Bosworth)在他的個人 Facebook 帖子上宣布收購腦機接口初創公司 CTRL-Labs。這是 Facebook 公司在過去五年中完成的最大收購案,自 2014 年以 20 億美元收購虛擬現實公司 Oculus VR 以來,這筆交易價值約為 10 億美元。下圖是CTRL-labs 的作者詳細名單。
![]()
【 可擴展的 sEMG 記錄平臺】
作者展示了整套硬件與數據平臺(圖1)。腕帶內置48 電極,構成16 雙極通道,2 kHz 采樣,噪聲僅2.46 μVrms;四種尺寸可在幾秒內佩戴完成(圖1a、1b)。研究者為162–6 627 名參與者設計了三類采集任務:一維光標追蹤、九類手勢以及無筆手寫(圖1c)。原始信號揭示出手指屈伸肌群的精細放電模式(圖1d、1e),為監督學習提供了豐富樣本。
![]()
圖 1. 用于腕部 sEMG 高通量記錄和實時解碼的硬件和軟件平臺
【 單一參與者模型不具有普遍性】
作者進一步闡釋了模型泛化(圖2)。單人模型跨會話尚可依賴增量數據降低漏檢率,但跨用戶誤差依舊居高不下;相反,多人通用模型在樣本量參數量呈冪律擴張時,腕角速度誤差可低至≈8° s?1 ,手寫字符錯誤率約10%,手勢分類誤差≈20%(圖2e–g),證實了大規模數據對非侵入式接口的決定性價值。
![]()
圖 2 . 單參與者和多參與者模型的泛化性能
【 通用模型的在線評估】
圖3聚焦閉環性能。17 名新人在連續光標任務中平均1.51 s命中目標;24 名新人以拇指滑動、食中指長按等動作在離散網格中達成0.88 指令·s?1;20 名新人在文本輸入中取得20.9 WPM,字符錯誤率自練習到正式評測階段持續下降。相較傳統觸控板(0.68 s)、JoyCon 手柄(1.45 指令·s?1)及無筆手寫(25.1 WPM),腕帶性 能雖略遜,卻無需占用雙手,且始終可用。
![]()
圖 3 . 通用 sEMG 解碼模型能夠在不同的 交互中 實現閉環控制
【 離散手勢模型學習到的表示】
作者深入解讀了解碼網絡的“生理基底”(圖4) 。首層 Conv1d 卷積核在時空上自發形成與單個運動單位動作電位(MUAP)高度相似的基函數(圖4b–4e);隨后三層 LSTM 逐層拉開不同手勢的表征距離,同時壓縮參與者身份、腕帶位置及肌電功率等干擾維度(圖4f–4i),最終實現對“意圖”而非“噪聲”的穩健編碼。
![]()
圖 4 . 離散手勢解碼器學習基于生理學的表征
【 個性化手寫模型可提高性能】
作者還說明了個性化微調的收益與邊界(圖5):在6 400 人通用模型基礎上,僅20 min 個人數據即可將手寫 CER 再降16%,相當于再收集約14000 min 外部數據;但預訓練人群越大,個性化收益呈遞減趨勢,且過擬合會降低跨人適用性 ,提示未來需在泛化與專化之間動態權衡。
![]()
圖 5. 通用 sEMG 手寫模型的個性化提高了性能
【總結 與展望】
該腕帶式 sEMG 接口突破了非侵入式帶寬瓶頸,實現了無需校準的跨人群即插即用,從而為移動計算、增強現實乃至神經康復打開新篇章。作者預言,借助更靈敏的硬件、多自由度映射及多模態傳感,肌電信號不僅可用于檢測指尖用力,還能探索肌動空間中的全新交互方式;對行動受限人群,這種“微努力”輸入亦有望成為普惠技術。未來,持續擴充多樣化數據集、結合 IMU 或其他生物信號,并在臨床群體中驗證通用模型,將是推動這一路線走向真實應用的關鍵 。
來源:高分子科學前沿
聲明:僅代表作者個人觀點,作者水平有限,如有不科學之處,請在下方留言指正!
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.