利用應(yīng)變傳感器陣列實(shí)現(xiàn)復(fù)雜的人體運(yùn)動(dòng)捕捉

基于柔性傳感器的運(yùn)動(dòng)捕捉技術(shù)在個(gè)性化醫(yī)療、人機(jī)交互、虛擬現(xiàn)實(shí)（VR）/增強(qiáng)現(xiàn)實(shí)（AR）等諸多領(lǐng)域中展現(xiàn)出巨大的發(fā)展?jié)摿?。目前，利用柔性力傳感器?shí)現(xiàn)運(yùn)動(dòng)捕捉的方式主要采用單個(gè)傳感器與單個(gè)關(guān)節(jié)/肌肉之間的一對(duì)一多節(jié)點(diǎn)捕獲策略。

然而，人體包括超過(guò)360個(gè)關(guān)節(jié)和300塊肌肉，這就需要不切實(shí)際的傳感器單元數(shù)量來(lái)實(shí)現(xiàn)全身運(yùn)動(dòng)捕捉，從而導(dǎo)致系統(tǒng)成本增加和過(guò)度的皮膚覆蓋。此外，整合大量傳感器單元需要持續(xù)增加互連導(dǎo)線的密度和精細(xì)度，這將導(dǎo)致更高的整體阻抗和噪聲水平，為大范圍內(nèi)保持高空間分辨率帶來(lái)挑戰(zhàn)。

據(jù)麥姆斯咨詢報(bào)道，近日，吉林大學(xué)電子科學(xué)與工程學(xué)院張彤教授研究團(tuán)隊(duì)，設(shè)計(jì)了一種由三個(gè)應(yīng)變傳感器單元組成的應(yīng)變傳感器陣列。通過(guò)利用不同應(yīng)變狀態(tài)下每個(gè)單元的響應(yīng)趨勢(shì)和響應(yīng)值的差異作為判斷依據(jù)，首次實(shí)現(xiàn)對(duì)應(yīng)變軸水平角度的判別，以及對(duì)復(fù)雜應(yīng)變模式中信息的解耦和準(zhǔn)確提取，從而更有效地獲取由復(fù)雜應(yīng)力引起的表面形變。

圖1 噴墨打印的紙基應(yīng)變傳感器單元和陣列的構(gòu)筑流程、敏感機(jī)理及應(yīng)用示意圖

圖2 分別討論印刷次數(shù)、敏感區(qū)域尺寸、紙張襯底厚度對(duì)傳感器敏感性能的影響，從中選出最佳的構(gòu)筑方案

該工作利用商用噴墨打印機(jī)及原裝墨盒在相紙上實(shí)現(xiàn)應(yīng)變傳感器及陣列的批量構(gòu)筑。噴墨打印墨水的主要成分為碳黑，通過(guò)打印過(guò)程在相紙表面涂層中形成圖案化的導(dǎo)電層，并經(jīng)過(guò)反復(fù)彎曲在碳黑層中構(gòu)建微裂紋。該微裂紋結(jié)構(gòu)不僅為應(yīng)變傳感器提供了高靈敏度，同時(shí)，可通過(guò)不同應(yīng)變方向引起微裂紋的分離和壓縮導(dǎo)致電阻的相反變化趨勢(shì)實(shí)現(xiàn)對(duì)異向應(yīng)變的解耦。

圖3 應(yīng)變傳感器單元及陣列對(duì)不同應(yīng)變軸水平角度的響應(yīng)性能分析

該應(yīng)變傳感器陣列由三個(gè)互成60°的傳感器單元組成。由于三個(gè)應(yīng)變傳感器單元在平面中具有不同的水平角度，當(dāng)陣列以任何應(yīng)變軸水平角度彎曲時(shí)，陣列中的每個(gè)應(yīng)變傳感器單元的應(yīng)變軸角度均不相同，進(jìn)而引起三個(gè)應(yīng)變傳感器單元響應(yīng)幅值和趨勢(shì)的顯著差異。因此，可以通過(guò)分析三個(gè)器件的響應(yīng)特征來(lái)識(shí)別陣列所在平面的應(yīng)變軸水平角度，同時(shí)該陣列還表現(xiàn)出對(duì)不同彎曲方向的辨別能力。

圖4 應(yīng)變傳感器陣列在手勢(shì)識(shí)別和運(yùn)動(dòng)跟蹤中的應(yīng)用

本工作進(jìn)一步探索了應(yīng)變傳感器陣列在監(jiān)測(cè)人類運(yùn)動(dòng)過(guò)程中多個(gè)關(guān)節(jié)和肌肉群引起的復(fù)雜應(yīng)變模式中的應(yīng)用。在已報(bào)道的工作中，大量研究集中在利用柔性力傳感器進(jìn)行手勢(shì)識(shí)別，特別是在手語(yǔ)識(shí)別和語(yǔ)言障礙患者的通信設(shè)備以及人機(jī)交互的背景下。這些研究均基于傳感器對(duì)手指關(guān)節(jié)運(yùn)動(dòng)的一對(duì)一監(jiān)測(cè)方式，這就需要至少五個(gè)傳感器單元來(lái)獲取所需的信息。研究人員發(fā)現(xiàn)，每個(gè)手勢(shì)都是通過(guò)手指關(guān)節(jié)和手背區(qū)域的肌肉和肌腱協(xié)調(diào)運(yùn)動(dòng)實(shí)現(xiàn)的，不同手指的彎曲和伸展過(guò)程伴隨著手背相應(yīng)肌肉和肌腱的協(xié)調(diào)運(yùn)動(dòng)。因此，本工作突破了傳統(tǒng)的手勢(shì)識(shí)別方法，將重點(diǎn)從監(jiān)測(cè)手指關(guān)節(jié)運(yùn)動(dòng)轉(zhuǎn)移到監(jiān)測(cè)由手背區(qū)域的肌腱和肌肉形成的復(fù)雜表面的應(yīng)變模式。不同手勢(shì)時(shí)肌肉和肌腱的收縮和放松引起的皮膚應(yīng)變變化會(huì)導(dǎo)致三個(gè)傳感器單元具有出不同的響應(yīng)趨勢(shì)和幅度。

同理，在上肢運(yùn)動(dòng)過(guò)程中，肩部、手臂和背部肌肉群的協(xié)調(diào)運(yùn)動(dòng)驅(qū)動(dòng)肩關(guān)節(jié)、頸椎和胸椎的運(yùn)動(dòng)，進(jìn)而導(dǎo)致背部表面曲率的變化，不同動(dòng)作將伴隨菱形肌形變方式和強(qiáng)度的差異。通過(guò)監(jiān)測(cè)菱形肌的形變和運(yùn)動(dòng)方式，可實(shí)現(xiàn)對(duì)上肢運(yùn)動(dòng)行為的分辨和追蹤。結(jié)合機(jī)器學(xué)習(xí)算法，利用應(yīng)變傳感器陣列檢測(cè)運(yùn)動(dòng)中樞區(qū)域皮膚的形變模式，在手勢(shì)識(shí)別和上肢運(yùn)動(dòng)姿態(tài)識(shí)別方面表現(xiàn)出高準(zhǔn)確度，為復(fù)雜的人體運(yùn)動(dòng)捕捉應(yīng)用提供了新的可行方案。

上述研究工作以“Less is more: Enabling complex human motion capture with a printed low-pixel strain sensor array”為題在國(guó)際著名期刊Nano Energy上發(fā)表。吉林大學(xué)電子科學(xué)與工程學(xué)院林修竹博士后為第一作者，通訊作者為張彤教授和趙紅然副教授。上述工作是該團(tuán)隊(duì)近期關(guān)于可穿戴柔性傳感器的最新進(jìn)展之一。吉林大學(xué)微納傳感材料與器件實(shí)驗(yàn)室（SMDLAB）長(zhǎng)期致力于面向工業(yè)生產(chǎn)安全、環(huán)境污染、人體健康以及家居環(huán)境等領(lǐng)域的氣體、濕度、壓力、溫度、生物分子等傳感檢測(cè)，開(kāi)展微納米傳感材料的設(shè)計(jì)和制備、傳感器的結(jié)構(gòu)設(shè)計(jì)以及應(yīng)用開(kāi)發(fā)。相關(guān)成果還發(fā)表在ACS Nano、Advanced Functional Materials、Nano-Micro Letters、Biosensors & Bioelectronics、Journal of Hazardous Material、ACS Sensors、Small、Small Methods、Sensors and Actuators B: Chemical、ACS Applied Materials & Interfacs、IEEE Electron Device Letters等期刊上。

課題組網(wǎng)站鏈接：
http://smdlab.jlu.edu.cn/index.htm

原文鏈接：
https://doi.org/10.1016/j.nanoen.2024.109350

審核編輯：劉清