[发明专利]基于可穿戴设备的立体色块障碍测试的方法和系统

权利要求书

1.一种基于可穿戴设备的立体色块障碍测试的方法，包括：

通过可穿戴设备采集用户在立体色块障碍测试中产生的多模态信号，所述多模态信号包括表面肌电信号、加速度信号、陀螺仪信号、方位计信号以及欧几里得空间中方位计信号；

对所述多模态信号进行预处理并划分为多个信号片段；

通过立体色块障碍测试模型对所述多个信号片段进行识别，其中所述立体色块障碍测试模型由神经网络模型组成，所述神经网络包括卷积神经网络、长短时神经网络或卷积-长短时神经网络；所述立体色块障碍测试模型通过将标定后的所述多模态信号片段进行融合训练得到的，所述融合包括在所述神经网络模型的数据层融合、特征层融合或决策层融合；

判断最长连续移动动作片段的数量是否达到设定的阈值，若达到所述阈值，则判定为完成一次立体色块移动；

统计完成所述立体色块移动的数量并输出测试结果。

2.根据权利要求1所述的立体色块障碍测试的方法，包括：根据修正后的动作片段统计最长连续移动动作片段的数量。

3.根据权利要求2所述的立体色块障碍测试的方法，包括：根据识别结果中移动动作片段的上下文动作片段，修正所述移动动作片段标注，若“0”动作片段上下文均为“1”，则将其修正为“1”，若“1”动作片段上下文均为“0”，则将其修正为“0”，其中，“0”动作片段代表无立体色块移动动作的片段，“1”动作片段代表包含色块移动动作的片段。

4.根据权利要求1所述的立体色块障碍测试的方法，其中，对所述多模态信号进行预处理包括：滤波、升采样和标准化。

5.根据权利要求4所述的立体色块障碍测试的方法，其中，所述滤波包括：将所述表面肌电信号经过一个频带范围是20-500Hz的4阶巴特沃斯带通滤波器以滤除高频噪声和运动伪迹；

以及其中，所述升采样包括：使用3次样条插值对齐所述多模态信号，使所述多模态信号中所有模态的信号采样频率均与所述表面肌电信号频率相同。

6.根据权利要求1所述的立体色块障碍测试的方法，其中，所述将标定后的所述多模态信号片段进行融合以训练所述立体色块障碍测试模型包括：将所述多模态信号片段在数据层进行融合，将融合后的所述多模态信号片段输入所述立体色块障碍测试模型进行识别并输出结果。

7.根据权利要求1所述的立体色块障碍测试的方法，其中，所述将标定后的所述多模态信号片段进行融合以训练所述立体色块障碍测试模型包括：将所述多模态信号片段输入所述立体色块障碍测试模型，在特征层进行融合，由所述立体色块障碍测试模型基于融合后的所述多模态信号片段进行识别并输出结果。

8.根据权利要求1所述的立体色块障碍测试的方法，其中，所述将标定后的所述多模态信号片段进行融合以训练所述立体色块障碍测试模型包括：将所述多模态信号片段输入所述立体色块障碍测试模型进行识别，将基于所述多模态信号片段中各个模态的信号片段的识别结果在决策层进行融合，并由所述立体色块障碍测试模型输出最终识别结果。

9.一种立体色块障碍测试系统，该系统包括：

立体色块障碍测试装置；

可穿戴设备；

处理器；以及

存储装置，其中存储有计算机程序，在所述计算机程序被处理器执行时，能够用于实现权利要求1-8之一的立体色块障碍的测试方法。