一种基于实际动作建模的左右食指连续运动想象识别系统的制作方法

文档序号:15434489发布日期:2018-09-14 22:01阅读:237来源:国知局

本发明涉及运动想象识别领域,尤其涉及一种基于实际动作建模的左右食指连续运动想象识别系统。



背景技术:

脑-机接口(brain-computerinterface,bci)是一种不依赖于大脑外围神经与肌肉正常输出通道的通讯控制系统,实现由人脑直接控制外界环境的目的。该定义由第一次脑-机接口国际会议给出。bci系统能够通过判断大脑的活动模式来输出用户的指令意识。到目前为止,最常用的bci系统大都是基于脑电信号。图1为一个完整的bci系统示意图,由信号采集、信号处理、外部输出设备三部分组成。通过头皮电极或植入电极获得含有使用者控制意图的脑电信息,经过各种信号处理的手段提取脑电信息特征并进行模式识别,最后将之转化为控制外部设备的操作命令。

研究表明mi(motorimagery)和me(motorexecution)能够激活相似的神经网络。mi是一种运动意图,可将其视为运动行为的心理认知过程,但没有任何实际动作的输出。一种普遍接受的观点是mi与运动规划/准备涉及相似的大脑区域/功能,运动的想象和执行能够在脑部功能区域引起相似的皮层活动。实际肢体动作或者想象动作均可引起皮层运动中枢中大量神经元活动状态的改变,从而使得脑电信号中的某些频率成分(例如alpha波、beta波和mu节律)同步减弱或者增强。上述现象被称之为事件相关去同步(event-relateddesynchronization,erd)以及事件相关同步(event-relatedsynchronization,ers)。近年来有关想象动作的应用技术研究有显著进展,想象动作已应用于人机交互领域,成为了bci控制的重要范式。相对于其它bci范式,基于想象动作的脑-机接口可用于中风康复训练,促进偏瘫患者大脑损伤脑区的修复和运动能力的重建。

值得注意的是,近年来,虽然已经有了一些成功的mi-bci系统,实现了由想象运动到输出指令的转换。但大多数的mi系统都是通过采集想象动作时的脑电数据,进行特征提取和模式识别,只要两类或多类想象运动任务之间存在差异就能得到较好的分类效果。但是,使用者的运动想象是否正确我们无法判断和评价。mi与真实动作的动作规划/准备涉及相似的大脑区域/功能,因此可以利用真实动作执行过程中的脑电数据的特征建立运动意图识别模型来对想象运动进行观测评价,并起到指导作用。



技术实现要素:

本发明提供了一种基于实际动作建模的左右食指连续运动想象识别系统,本发明根据真实连续按键运动的脑电数据提取特征建立模型来识别想象连续按键运动,详见下文描述:

一种基于实际动作建模的左右食指连续运动想象识别系统,

左右食指连续按键动作,使用者根据电脑屏幕显示的左或右箭头,自主执行左手或右手的食指连续按键动作;

采集使用者在执行动作时产生的脑电信号数据,读取脑电信号并对数据进行处理分析,得到分类结果;

利用能得到较高分类正确率的特征建立分类模型用于识别连续想象按键动作,以评价使用者运动想象的方法和能力;为运动想象任务提供了训练方法和评价标准。

所述运动想象识别系统包括:执行动作建模阶段:

受试者需要注视电脑屏幕,首先有2s的休息时间,然后根据屏幕出现的箭头提示根据自己的意愿在任意时间进行左或右手食指的连续按键动作,每个按键间隔1s,完成4次按键动作后休息2s;采集的400个样本经过信号处理用于建立想象动作分类的模型。

所述运动想象识别系统包括:想象动作测试阶段:

受试者同样需要注视电脑屏幕,然后根据屏幕出现的箭头提示进行想象左或右手食指的连续按键动作,范式与执行动作相同;采集的脑电信号通过之前建立的模式识别模型进行信号处理分类。

本发明提供的技术方案的有益效果是:

1、本发明根据mi和me能够激活相似的神经网络,可以通过真实动作建立的运动意图识别模型对想象动作的分类性能进行观测,以评价使用者运动想象的方法和能力;为运动想象任务提供了训练方法和评价标准;

2、本发明解决目前mi-bci模型建立过程中不能规范化的问题,通过进一步的研究,可以得到更加完善的脑-机接口系统,有望获得可观的社会效益和经济效益;

3、本发明与传统的运动想象处理算法相比,更注重使用者运动想象任务的准确度和完成度;

4、基于这种设计思路,本发明可以设计更多的实验范式,为mi-bci系统大指令集操作奠定基础。

附图说明

图1为脑机接口组成示意图;

图2为一种基于实际动作建模的左右食指连续运动想象识别系统的结构示意图;

图3为单个试次结构图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚,下面对本发明实施方式作进一步地详细描述。

实施例1

想象动作指大脑仅有动作意图但不执行实际肢体动作,其心理或思维认知过程所激活脑区的神经元集群放电活动与执行真实动作时所产生的脑电(electroencephalograph,eeg)信息特征有着高度的相似性。因此本发明实施例通过采集执行真实动作时产生的脑电信号数据,提取特征,建立运动意图识别模型,用于想象动作的分类识别。

其技术流程是:本发明实施例设计一种新的实验动作范式,即左右食指连续按键动作。使用者根据电脑屏幕显示的左或右箭头,自主执行左手或右手的食指连续按键动作,采集使用者在执行动作时产生的脑电信号数据,读取脑电信号并对数据进行处理分析,得到分类结果。利用能得到较高分类正确率的特征建立分类模型用于识别连续想象按键动作。

本发明实施例的结构示意图如图2所示。使用者注视电脑屏幕的刺激界面,根据屏幕上出现的箭头指向进行左或右食指连续按键动作。与此同时使用64导联脑电采集系统采集脑电信号,使用ag/agcl电极(阻抗小于15000欧姆),所有导联的脑电信号以头顶为参考。脑电采样频率为1000hz,滤波通带为0.5~100hz,并采用50hz陷波器去除工频干扰。

数据预处理包括降采样至200hz,去眼电和空间滤波。后续的数据处理提取相应的特征信号,从而将这些特征应用于模式识别,建立一个信号处理及分类模型。

之后使用者注视电脑屏幕的刺激界面,根据箭头指向进行左或右手食指的想象按键动作,将采集到的脑电信号进行相同的预处理,并用之前建立好的特征提取和模式识别算法进行处理分析。

实验过程前,需要对受试者进行连续按键动作训练,让受试者以1s为间隔进行按键。实验分为两个阶段:执行动作建模阶段,想象动作测试阶段。

一、执行动作建模阶段:

受试者需要注视电脑屏幕,首先有2s的休息时间,然后根据屏幕出现的箭头提示根据自己的意愿在任意时间进行左或右手食指的连续按键动作,每个按键间隔1s,完成4次按键动作后休息2s。采集的400个样本经过信号处理用于建立想象动作分类的模型。

二、想象动作测试阶段:

受试者同样需要注视电脑屏幕,然后根据屏幕出现的箭头提示进行想象左或右手食指的连续按键动作,范式与执行动作相同。采集的脑电信号通过之前建立的模式识别模型进行信号处理分类。

实施例2

下面结合具体的计算公式、实例对实施例1中的方案进行进一步地介绍,详见下文描述:

一、脑电数据的特征提取

预处理中,首先采用共平均参考(commonaveragereference,car)进行空间滤波。car方法是将原始eeg信号减去所有导联eeg信号的均值,如下式所示:

其中,n表示所使用的导联总数,vi表示第i个导联处的原始eeg信号,表示car滤波之后第i个导联处的eeg信号。

二、共空间模式滤波

共空间模式滤波(commonspatialpattern,csp)算法可构建空间滤波器,其最大化一类条件下数据相对于另一类条件下数据间差异的比率,通过这种方式,空间滤波器可以提取出eeg的成分波,这些成分在两种条件下差异最大。这种空间滤波器适用于bci实现运动想象任务,其中被试者的意图可以在eeg成分波的差异中从特定频段变化中推出。在基于运动想象的非植入式bci系统中,利用csp构建的新时间序列,取得了很好的分类结果。

将单次任务实验的脑电数据表示为一个n×t维的矩阵e,其中n是脑电测量时的通道数,t是脑电采集时每个通道的采样点数,则归一化的脑电数据协方差矩阵可以表示为:

分别使用c1和cr代表想象左和右两种情况下的空间协方差矩阵,它们可以通过计算每种实验的平均协方差矩阵来获得。合成的空间协方差矩阵可以表示为:

cc=c1+cr(3)

而cc可以表示成cc=ucλcuct,其中uc是矩阵的特征向量,λc是相应的特征值,在这一变化过程中,将特征值按照降序进行了排列,其相应的特征向量也重新进行了排列。接下来应用主成分分析法,求出白化变换:

则协方差矩阵c1和cr可以变换为:

s1=pc1pt,sr=pcrpt(5)

其中,s1与sr拥有共同的特征向量,即如果s1=bλ1bt,则sr=bλrbt,并且λ1+λr=i,其中b为s1与sr的共同特征向量,i为单位阵。由于两类矩阵的特征值相加总是为1,则s1的最大特征值所对应的特征向量使sr有最小的特征值,反之亦然。

将白化后的eeg信号投影在特征向量b的前m和后m列特征向量上,就能够得出最佳的分类特征。投影矩阵w=btp,则单次任务实验的脑电数据e可以变换为z=we。

对于脑电特征的提取,可以将投影后的信号zp(p=1,…,2m)做如下变化后作为特征值。

三、模式识别-支持向量机

在模式识别的过程中使用的是支持向量机(supportvectormachines,svm)的方法。svm是近年来在模式识别与机器学习领域中出现的新工具,以统计学习理论为基础,通过构造最优超平面,使得对未知样本的分类误差最小。在本发明中,执行动作阶段的脑电数据经过了特征提取阶段之后,我们将这些从样本中提取到的特征用来训练svm分类器,训练后得到一个model;在想象动作测试阶段,利用建立好的model实时对于未知模式类型的运动想象进行分类。

svm是基于统计学习理论的一种机器学习方法,它通过适当的非线性映射将输入向量映射到一个高维的特征空间,使得数据(属于两类)总能被一个超平面分割。所谓最优分类面就是要求分类面不但能将两类数据正确分开,而且使分类间隔最大。

综上所述,本发明实施例设计了基于实际动作建模的左右食指连续运动想象别识别系统。该项发明能够指导使用者正确学习运动想象方法并评价其运动想象能力。通过进一步研究可以得到更大指令集的mi-bci系统,在电子娱乐、工业控制等领域,有望获得可观的社会效益和经济效益。

本发明实施例对各器件的型号除做特殊说明的以外,其他器件的型号不做限制,只要能完成上述功能的器件均可。

本领域技术人员可以理解附图只是一个优选实施例的示意图,上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。

以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1