撰文/高小榕(清華大學生物醫學工程系教授、博士生導師、中國生物醫學工程學會醫學神經工程分會候任主委、北京地區"廣受關注學術論文報告會"生物醫學學科報告人)
電影《流浪地球》中,通過控制機器人外骨骼,救援隊在冰原中拖動火石、救助墜落的人員、最後協力推動"頂針",賺足了觀眾的眼球。這在現實中可以實現嗎?我們真的可以如電影中一樣,隨心所欲地操控沉重的機械戰甲嗎?當前,基於肌電的人機互動技術為我們提供了可能。
肌電技術:可識別每一個動作骨骼肌肉電訊號,簡稱肌電,是一種伴隨肌肉收縮運動,由肌肉細胞和相關神經元電活動疊加產生的訊號。肌電訊號早先主要被應用在運動相關的疾病診斷和康復訓練等領域中。由於在目標肌肉群的面板上放置電極即可採集到表面肌電訊號,對人體沒有任何損害,近年來,肌電這項技術也開始為普通人群提供服務。
肌電的產生與肌肉的活動息息相關。不同的動作伴隨著不同的肌肉群收縮模式,也對應著不同的肌電響應情況,因此,肌電常被用於進行人體活動狀態的解讀。
目前,肌電已經被證明可以用來識別諸如握拳、打響指和抬手等多個手勢,以及前進、後退和轉向等多種步態。此外,由於動作的產生也需要肌肉活動,肌電不僅可以識別已經發生的動作,還可以對將要進行的動作進行預測。由於肌電在動作識別方面的潛力,其在人機互動中的應用開始逐步受到關注。
實際上,當前市面上已經有多種較為成熟的動作識別解決方案,比較著名的有Kinect 和Leap Motion等。但是,這些方案往往都是基於計算機視覺實現,需要通過攝像頭拍攝到人的活動,根據影象分割技術,提取關鍵的骨骼節點,識別出當前對應的動作。正因為其原理如此,這些方案對於環境光線,遮擋物和離攝像頭的距離都有一定的要求,因而也限制了應用場景和人的活動範圍。基於肌電的動作識別只需要在胳膊或者小腿等位置貼上電極,不再需要佈置攝像頭等其它外部裝置,就可以實現各種場景下的動作識別,相較而言,就要靈活得多。
人機互動:多個場景應用廣泛正因為其靈活性,基於肌電的動作識別在多種人機互動場景中都有應用的可能。
例如,航空航天、深海作業和災害現場搜救等條件嚴苛充滿風險的地方往往需要遠端控制機器人進行協助。而利用肌電進行機器人控制只需要使用者作出相應的動作即可,這讓整個操作流程變得非常便捷,操作員更有身臨其境的感覺,對突然出現的危機情況也可以更快地進行反應。此外,這種基於肌電的使用者動作同步模擬還有望被應用在遠端手術中。也許在未來的一天,通過分析肌電實時提取大夫的手部動作,我們可以讓身處北京的大夫控制手術機器人治療深圳的患者,讓頂尖的醫生能幫助到更多的人。
另外,基於肌電的動作識別還可以被應用於機器人外骨骼的控制。這種技術既可以打造中強力的機械戰士,也能在日常生活中發揮作用,例如搬運重物,在火災現場救出被困在高層的人們,等等。除此之外,該技術還可以幫助肢體缺損的人重獲活動能力。例如,已經有基於肌電的解決方案,幫助因事故完全切除手掌的鋼琴愛好者,控制機械手成功彈起了自己心愛的樂曲。
肌電在娛樂行業也有相應的前景,除了控制小車、無人機等小遊戲之外,基於肌電的動作識別也可以作為虛擬現實和增強現實遊戲的一個輸入維度,只需要如真實世界中作出相應的動作,玩家就可以在遊戲世界中走動,拾取物品或者進行一次攻擊,這種互動模式相較於現有的控制手柄會帶來更高的控制感和沉浸感,讓遊戲體驗提升。同時,基於肌電的動作識別還可以用於智慧家居的控制,想象一下這樣的場景:進門之後打一個響指,家中的燈光、空調和音樂就相繼開啟,迎接主人的迴歸。
▲基於小腿表面肌電的智慧移動機器人控制系統示意圖。通過對採集的肌電訊號進行比較分析, 選取了動作段與靜息區別較為明顯的CH1等四通道訊號作為後 續研究訊號源。左上圖是電極放置的位置;右上圖是實際的控制場景;左下圖是機器人的示意圖;右下圖是步態識別的準確率(供圖/ 高小榕)
人機融合:"雙向"互動營造沉浸式體驗基於肌電的人機互動在國內外都受到廣泛的關注,也是研究的熱門話題之一。我和清華大學神經工程研究室徐超立一起,提出了一種新穎的"基於小腿表面肌電訊號的智慧移動機器人控制方法"。通過採集單腿的小腿肌電訊號,並將使用者步態動作的識別結果實時轉化為對機器人運動控制的指令,該系統實現了人與智慧移動機器人的實時協同互動。該系統採集方法簡單,實時性和準確率都很高,於2016年發表在《中國生物醫學工程雜誌》上,引起學術界好評,在2019年被評為"北京地區廣受關注學術論文"。
那麼在下一階段中,肌電在人機互動領域還有哪些提升的方向?一種可能性是實現"雙向"的互動。目前常用的,把肌電中資訊解碼後用於控制裝置只是一種從人到機的單向資訊傳遞,實際上,在與觸覺反饋和肌肉電刺激等技術結合之後,我們還可以將反饋資訊再直接輸入給人。例如,通過肌電控制化身在虛擬現實場景中鞠一捧水的同時,如果具有反向的輸入通道,我們還可以感覺到水的重量和流動感。這種雙向的互動可以進一步地提高真實感,從而實現人機互動到人機融合的跨越。
由於肌電採集相對簡潔,蘊含資訊豐富,在動作識別中具有很大的潛力。但也需要注意到現有技術仍存在著運動噪聲干擾判別、動作識別效果受個體差異影響,單次使用時間長效能降低等問題。我們期待在研究者的不斷努力下,肌電可以在人機互動中發揮更大的作用,為廣大使用者群體帶來更自然、更便利的人機互動解決方案。■
出品:科普中央廚房
請發郵件至[email protected]