[发明专利]一种基于多模态信号识别的脑机接口方法

权利要求书

1.一种基于多模态信号识别的脑机接口方法，包括脑机接口系统，其特征在于：所述脑机接口系统包括主机(100)、显示屏(200)、眼动仪(300)，所述主机(100)包括微处理器(101)、脑电波信号采集模块(102)、脑电波信号分析模块(103)、耳夹式红外心率采集模块(104)、心率信号分析模块(105)，所述显示屏(200)包括显示模块(201)、定位捕捉模块(202)、数据反馈模块(203)；

该脑机接口方法具体包括以下步骤：

S1.设备启动采集脑电波信号；

S2.分析脑电波信号并生成对应动作意识；

S3.显示屏显示动作意识是否启动界面；

S4.用户通过视线集中来选择是否启动动作意识，“是”则进入下一步骤，“否”则不执行动作意识命令；

S5.显示屏进入详细选择界面，用户通过实现集中在具体选择界面来确定动作意识；

S6.在进入动作意识详细选择界面时，通过分析用户的心率波动情况来对动作意识进行最终确认，波动较大代表选择错误，退回上一步重新选择，波动较小代表选择正确，执行动作意识。

2.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法，其特征在于：所述S1中采用脑电波信号采集模块(102)来采集信号，所述脑电波信号采集模块(102)选用非侵入式头戴电极片。

3.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法，其特征在于：所述S2中的具体过程为，脑电波信号分析模块(103)对脑电波信号采集模块(102)传递的信号进行转换分析成动作意识，然后传递到微处理器(101)。

4.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法，其特征在于：所述微处理器(101)与显示屏(200)电连接，所述眼动仪(300)与显示屏(200)的显示模块(201)电连接，且所述眼动仪(300)设置在显示屏(200)的前端底部。

5.根据权利要求4所述的一种基于多模态信号识别的脑机接口方法，其特征在于：所述眼动仪(300)的指针在显示模块(201)上显示，当指针停留在显示屏(200)界面任意位置3秒后，默认在该处位置点击确认命令，相当于鼠标双击一次。

6.根据权利要求5所述的一种基于多模态信号识别的脑机接口方法，其特征在于：所述定位捕捉模块(202)与显示模块(201)、数据反馈模块(203)电连接，所述定位捕捉模块(202)用于确认眼动仪(300)在显示屏(200)上的具体位置，并将信息给到数据反馈模块(203)。

7.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法，其特征在于：所述数据反馈模块(203)与微处理器(101)电连接，数据反馈模块(203)将显示屏(200)中产生的电信号传递到微处理器(101)中。

8.根据权利要求1所述的一种基于多模态信号识别的脑机接口方法，其特征在于：所述耳夹式红外心率采集模块(104)选用耳夹式红外心率传感器，戴在用户耳后，且与心率信号分析模块(105)电连接，所述心率信号分析模块(105)与微处理器(101)电连接。