视觉引导下的运动执行与运动想象EEG时频特征对比分析

2022-02-18 06:44伍彪覃兵吴鑫周璐钱志余李韪韬高凡祝桥桥
数据采集与处理 2022年1期
关键词:握拳电信号小波

伍彪,覃兵,吴鑫,周璐,钱志余,李韪韬,高凡,祝桥桥

(南京航空航天大学自动化学院,南京 211106)

引 言

信息技术及脑神经技术的快速发展,使得人们对脑的探索越来越深入,脑⁃机接口(Brain⁃computer interface,BCI)技术成为新兴研究领域。BCI系统在大脑和计算机或外部设备之间建立一个直接的通信通道,主要研究目的是建立一个非肌肉的交流通道,使用户不需要任何身体活动来使用它进行交流和控制[1]。近年来BCI发展迅速并广泛运用于各个领域。在辅助运动领域,运动障碍患者可以使用它进行沟通和控制,从而提高患者的生活自理能力;同时,让他们主动参与到康复治疗中,可以促进偏瘫部位的康复[2]。在军事作战领域,通过对飞行员高速飞行时的注意力进行监控,帮助其在高加速的情况下对飞机的操纵,也可以作为微重力或者超重力环境下宇航员控制宇宙飞船的一种全新的方法[2]。在消费领域,通过思维翻译装置(Thought translation device,TTD)将消费者想法直接转化为机器语言,实现脑⁃机直接通信[3]。在游戏领域,被试通过BCI能够按照指示通过脑电活动将光标向上或向下移动到指定目标,完成简单的游戏操作等[4]。

在应用于BCI系统的各种脑成像技术中,脑电信号(Electroencephalogram,EEG)是最常用的方法,而运动想象(Motor imagination,MI)的EEG较容易定点测量,所以基于MI的BCI系统是BCI系统中最常用的[5]。不同于运动执行(Motor execution,ME)需要被试按照要求身体做出相应的运动,MI只需要被试脑中想象给定的运动任务,即使反复想象也不会发生实际的运动[6]。目前基于MI的BCI系统的研究主要包括鲍静益团队设计的一种组合特征提取方法,通过结合时频域以及空间域的多种信息进行特征提取,能够更加全面地描述脑电信号的特征,如时频域、能量域和空间域的特征信息,从而提高BCI的分类精度[7];郭闽榕[8]提出了一种多通道的脑电信号特征提取方法,结果相比于传统特征提取方法在识别精确率、运行时间均提升显著。虽然以上研究结果均能大大改善BCI的分类精度和分类速度,但仍然存在局限:(1)实时性差,每个被试使用前都需要经过长时间训练才能驱动BCI,BCI不能实时有效地解码被试的真实运动意图;(2)系统普适性差,不同被试之间存在差异性,导致BCI系统训练的模型只适用单个特定被试。其原因可能是ME与MI过程大脑激活区域存在差异性。已有研究通过功能性磁共振成像(functional magnetic resonance imaging,fMRI)方法表明,ME与MI过程大脑皮层运动区存在差异性[9]。在MI与ME脑激活的模式研究中,白学军等[10]利用fNIRS发现ME和MI过程中大脑皮层氧合血红蛋白浓度变化有区别,即ME中表现出大脑左半球偏侧化优势,而在MI中无偏侧化优势。这些研究表明,MI与ME中大脑激活模式的不同可能是限制基于MI的BCI技术的实时性和普适性的最重要挑战。

基于以上问题,本文提出基于EEG信号的ME与MI脑活动的分析,通过设计视觉诱导的上肢ME与MI对照实验,对上肢ME和MI过程的EEG信号进行分析,比较两者在脑电信号上的相同以及差异性,为提高基于MI的BCI系统的实时性和普适性提供有效的理论依据。

1 实验方法

1.1 实验设备

实验设备为Neuroscan公司的EEG采集设备(Neuroscan,Victoria,Australia),包括硬件和软件部分,硬件部分包括eego脑电放大器和64导waveguard电极帽;软件部分包括eego mylab采集分析软件,主要用于采集和记录实验过程的脑电信号同时带有简单的数据处理过程(带通,去直流等)。

1.2 实验设计

1.2.1 实验程序

研究基于10名身心健康被试者(8男2女,年龄20~23岁)的脑电信号进行分析,根据爱丁堡惯用手量表[11]的评估,所有参与者惯用手均为右手,视力正常或矫正至正常,并且均未参与过相关脑电实验。实验前首先向被试说明实验目的和注意事项并签署知情同意书,并得到南京航空航天大学伦理道德委员会支持。被试者要求坐在一张舒适的座椅上,正对电脑屏幕,双眼距电脑屏幕约50 cm。实验前观察员向被试对实验范式的内容进行清晰的说明。实验开始后,被试佩戴电极帽,按照国际10/20系统的要求排放电极帽的电极位置,参考电极位于耳垂连线平均位置,接地电极位于前额中心点位置,实验时要求所有电极的阻抗都调至5 kΩ以下,此时采集的数据效果较为理想。被试脑电采集实验图如图1所示。

图1 脑电采集实验图Fig.1 EEG acquisition experiment diagram

1.2.2 实验范式

实验分为MI与ME两种,两者范式相同,但给予被试的提示与要求不同:(1)ME要求被试集中注意力观看显示屏,并按照要求做出握拳动作;(2)MI要求被试集中注意力观看显示屏,想象握拳动作,但全身肢体保持不动。

ME具体实验流程如图2所示。实验开始显示屏出现持续6 s的提示语,告知被试接下来的实验过程,以及要求被试保持专注全身放松,然后出现持续1 s的绿色放松界面,提示被试精神集中,身体放松,运动执行动作即将开始,接下来屏幕左端(右端)会出现持续5 s的白点,提示被试左手(右手)进行2~3次适当速度、幅度、力度的握拳行为,这样一次握拳实验结束。

图2 实验流程图Fig.2 Experimental flowchart

MI实验流程与ME过程类似如图2,唯一的不同之处在于屏幕左端(右端)出现白点时,被试想象自己左手(右手)进行2~3次适当速度、幅度、力度的握拳行为,整个想象过程中要求被试保持全身放松不动。为了提高被试想象效果,每轮实验后会向患者询问MI过程中的感受:是否有手动的冲动,能否清晰想象出自己握拳的画面,从而让他们认真体会肢体感觉。

每组任务模式实验进行3组,每组实验中包括14次握拳过程,包含7次左手和7次右手握拳实验,左手右手任务是随机出现的,每组实验休息10 min,避免被试肌肉疲劳影响实验结果。记左手握拳ME实验为T1,右手握拳ME实验为T2,左手握拳MI实验为T3,右手握拳MI实验为T4。

1.3 数据分析

1.3.1 脑活动区域选择

本文主要研究ME与MI的脑活动差异性,运动皮质层最有可能是运动执行与运动想象过程中最相关的脑区。依据如图3所示64通道脑电图电极位置,选取处于皮质层的C3、C4电极通道的脑电信号来探究ME与MI的脑区相关活动。

图3 64通道脑电图电极位置示意图Fig.3 Diagram of 64-channel EEG electrode position

1.3.2 预处理

通过采集设备导出的原始数据信噪比较低,因此本文通过对数据进行预处理从而提高数据的信噪比,使得后期时频域分析获取更可靠的结果。

(1)降采样

拙作《山西“子学”渊流述略及成因探析》探讨了晋地历代学术大家对于晋学及其中国学术史的贡献,并分析了晋地学术土壤形成的原因,大要有二:一是晋地学人走出去吸收先进的思想,致仕后回归晋地,设教讲学,形成一定的学术流派和文化氛围,影响常达百千年; 二是外地学者走进来,在晋地任职或游历,与晋地学人互动,以个人深厚的学养滋养晋人,或者改革学制等,直接推动了晋学的发展。

通过对采集的EEG信号降采样至250 Hz,然后查看数据的功率谱密度(Power spectrum density,PSD)图来判断数据的噪声程度,以及有无谐波和眼电干扰,结果如图4所示。从图4可以看出,75 Hz、100 Hz等位置都存在明显的眼电和谐波干扰。

图4 降采样到250 Hz后64通道脑电信号的PSD图Fig.4 PSD map of 64-channel EEG signal after downsampling to 250 Hz

(2)滤波

采用有限长单位冲激响应滤波器(Finite impulse response,FIR)对降采样后的脑电数据进行0.3~105 Hz的带通滤波,提取需要频段的EEG信号,再运用100 Hz陷滤波器去除100 Hz谐波干扰。

(3)独立成分分析

EEG信号微弱,容易受到由眼电带来的伪迹和工频干扰[12]。不同于传统的线性独立成分分析(Independence component analysis,ICA)算法,通过截尾的Edgeworth展开或者Gram⁃Charlier展开来估计边缘概率密度,从而来得到近似的互信息估计[13]。本文运用基于Informax算法的ICA算法来去除干扰,该算法是基于Bell和Sejnowski[14]在1995年提出的神经网络学习Infor⁃max算法。该算法通过梯度上升准则作用与输出的熵值来改变分离矩阵权值W,使得梯度上升的联合熵最大时输出的各个向量趋于独立[15]。神经网络输出的y1,y2,y3,…,yN的联合熵函数为

式中:H(yi)为网络输出的边缘熵值,I(y1,y2,y3,…,yN)为输出间的互信息。

Informax算法是通过调整分离矩阵权值W,来达到最大化联合熵的目的,从而使输出变量间相互独立。改变W的函数为

如图5为运用Informax ICA算法对前面处理后数据的分析结果,从图中可以看出成分2,16,42(IC2,IC16,IC42)在眼电通道周围信号比较强,体现为眼电伪迹干扰较大,应当去除。

图5 ICA成分图Fig.5 ICA composition diagram

EEG信号是非平稳非线性的信号,同时包含高频和低频信号,本实验中多通道的EEG信号还存在时间、频率双线性的交叉干扰的问题。由于小波分析具有多分辨率的特征,且Morlet小波变换在高频段或者低频段时都能够提供较好的时间或频率分辨率,本文综合考虑后选取Morlet复值小波[16]对预处理后的EEG信号进行时频域分析,即

式中:fc为小波的中心频率,fb为小波的带宽参数,波长σt=1/(2πfb)。Morlet小波变换中中心频率于带宽存在一一对应关系,其原因在于Morlet复值小波变换存在一个恒定的比率K=2πfc/fb,实际应用中,一般选取K大于5。

本文通过Morlet复值小波对采样时间序列进行频带组特征提取,该小波变换设计在一个中心频率fc,其时间分辨率定义为半高宽FWHMfc,由高斯核加权如式(4)所示,本文中心频率fc选取1 Hz,时间分辨率选取3 s。小波的长度通过式(5)缩放,能够更好地捕捉振荡活动的变化成分。以0.5 Hz为间隔计算小波系数,通过式(3)对选取的波形进行卷积。具有非正交性的Morlet小波是经过高斯调整的复指数小波,式(3)中i为虚数。

2 实验结果

单个实验任务下各个波段存在不同特征。在T1任务下,C3和C4通道的delta波为优势波,幅值明显高于其他波段,alpha波为次优势波,theta、beta、gamma 1、gamma 2波段幅值变化不明显(图6(a))。在T2任务下,C3和C4通道的delta波也为优势波,alpha波也为次优势波,其他波段也未有明显变化(图6(b))。在T3任务下,C3和C4通道的alpha波为优势波,幅值明显高与其他波段,delta波为次优势波,the⁃ta、beta、gamma 1、gamma 2波段幅值变化不明显(图6(c))。在T4任务下,C3和C4通道的alpha波也为优势波,delta波也为次优势波,其他波段幅值也未有明显变化(图6(d))。

图6 C3、C4通道的左(右)手握拳ME和MI的时频图Fig.6 Time-frequency diagram of ME and MI of left(right)hand fist in channels C3 and C4

在ME与MI两个不同实验任务下,波段变化呈现不同趋势,如图7所示。在C3通道,T1和T3任务相比在delta波段和alpha波段具有明显变化,其他波段未有明显变化。具体表现为,delta波呈上升趋势,alpha波呈下降趋势。在C4通道,T1和T3任务相比也在delta波段和alpha波段具有明显变化,其他波段也未有明显变化。具体表现与C3通道相似,delta波呈上升趋势,alpha波呈下降趋势。在C3通道,T2和T4任务相比在delta波段和alpha波段具有明显变化,其他波段未有明显变化。具体表现为,delta波呈上升趋势,alpha波呈下降趋势。在C4通道,T2和T4任务相比也在delta波段和alpha波段具有明显变化,其他波段也未有明显变化。具体表现与C3通道相似,delta波呈上升趋势,alpha波呈下降趋势。

图7 单个通道同一只手握拳ME与MI的差异时频图Fig.7 Time-frequency diagram of the difference between ME and MI of clenching a fist with the same hand in a single channel

3 结果分析

本文基于EEG信号对ME与MI过程中的脑活动进行了比较分析。结果表明,在MI过程中无论左手还是右手进行实验任务,均表现为alpha为优势波。而在ME过程中,无论左手还是右手进行实验任务,均表现为delta波为优势波。这与已有研究发现[17]由于alpha波是自发脑电,多在清醒闭目时出现;当受到外界刺激时,alpha波降低,delta波增强的结果一致。ME与MI实验任务比较结果表明,delta波呈上升趋势,alpha波呈下降趋势。这与2008年关慧等[18]通过多谱段压缩、功率谱矩阵分析等分析方法,证明静息运动想象状态相比于运动状态下alpha波增强的结果一致。产生上述两类结果的原因可能是由于执行握拳时不再是静息想象状态,导致alpha波段功率下降和delta波段功率上升。

与现有研究相比,本文通过时频分析方法对于单个实验任务以及不同实验任务下ME和MI的EEG信号都进行了探究,证明两者存在差异性,为基于MI设计的BCI系统改善实时性和普适性提供了可靠实验数据。但还存在一些不足:参与者皆是右利手志愿者,目前还不清楚本文研究结果是否可以推广到左利手或者有上肢运动疾病的患者,除此之外本研究只有少量的参与者。基于这些限制,未来研究应该包括更多的被试,包括左利手被试和其他各种任务。

4 结束语

本文基于EEG信号对ME与MI过程中的脑活动进行了比较。采用时频分析方法,通过对ME和MI任务下EEG脑电信号频率特征的提取,得出ME与MI在时频域上存在明显的差异性,结果显示在MI实验中,均表现为alpha波为优势波,而在ME过程中,均表现为delta波为优势波。相比较于单个MI任务下EEG脑电信号设计的BCI存在的实时性与普适性的不足,本文通过ME与MI的对照比较,可对未来的BCI设计完善提供有效理论依据。

猜你喜欢
握拳电信号小波
基于多小波变换和奇异值分解的声发射信号降噪方法
走路握拳头脑健
基于联合聚类分析的单通道腹部心电信号的胎心率提取
构造Daubechies小波的一些注记
小兔上学
基于MATLAB的小波降噪研究
经常握拳 延年益寿
基于Code Composer Studio3.3完成对心电信号的去噪
经常握拳 可以提神
基于随机森林的航天器电信号多分类识别方法