[发明专利]一种虚拟键盘的按键识别方法、系统、设备及存储介质

权利要求书

1.一种虚拟键盘的按键识别方法，应用了惯性测量单元数据手套以及增强现实眼镜，其特征在于，所述方法包括：

惯性测量单元数据手套获取预先滤波降噪后的用户手指按键移动的运动信息；其中，

所述获取预先滤波降噪后的用户手指按键移动的运动信息之前，还包括：

当接收到针对惯性测量单元数据手套输入的用户手指按键移动指令时，获取所述用户手指按键移动的运动信息；

将所述用户手指按键移动的运动信息输入预先保存的滤波降噪模块中生成滤波降噪后的用户手指按键移动的运动信息，将所述滤波降噪后的用户手指按键移动的运动信息作为预先滤波降噪后的用户手指按键移动的运动信息；

惯性测量单元数据手套将所述预先滤波降噪后的用户手指按键移动的运动信息通过预先保存的蓝牙发送模块发送至增强现实眼镜；

增强现实眼镜接收来自惯性测量单元数据手套发送的用户手指按键移动的运动信息；

增强现实眼镜获取预先处理后的图像信息；

增强现实眼镜将所述用户手指按键移动的运动信息和所述预先处理后的图像信息输入预先保存的数据处理模块中进行融合，生成融合后的数据样本；

增强现实眼镜将融合后的数据样本输入预设神经网络模型中生成按键预测结果；

增强现实眼镜将所述按键预测结果输入预先保存的模式转化模块中将所述按键预测结果转化生成增强现实眼镜所能识别的字符；

增强现实眼镜将所述增强现实眼镜所能识别的字符进行显示；其中，

所述获取预先处理后的图像信息之前，还包括：

获取用户手指按键的图像信息集合；

将所述图像信息集合输入预先保存的滤波降噪模块中生成处理后的图像信息，将所述处理后的图像信息作为预先处理后的图像信息。

2.一种虚拟键盘的按键识别系统，其特征在于，包括：惯性测量单元数据手套和增强现实眼镜；

所述惯性测量单元数据手套，用于获取用户手指按键移动的运动信息，将所述用户手指按键移动的运动信息输入预先保存的滤波降噪模块中生成滤波降噪后的用户手指按键移动的运动信息，然后将所述滤波降噪后的用户手指按键移动的运动信息通过预先保存的蓝牙发送模块发送至增强实现眼镜；

所述增强现实眼镜，用于接收来自惯性测量单元数据手套发送的用户手指按键移动的运动信息，然后获取预先处理后的图像信息，再将所述用户手指按键移动的运动信息和所述预先处理后的图像信息输入预先保存的数据处理模块中进行融合，生成融合后的数据样本，再将融合后的数据样本输入预设神经网络模型中生成按键预测结果，再将所述按键预测结果输入预先保存的模式转化模块中将所述按键预测结果转化生成增强现实眼镜所能识别的字符，最后将所述增强现实眼镜所能识别的字符进行显示；其中，

所述增强现实眼镜，还包括：

获取用户手指按键的图像信息集合，然后将所述图像信息集合输入预先保存的滤波降噪模块中生成处理后的图像信息。

3.根据权利要求2所述的系统，其特征在于，所述惯性测量单元数据手套，包括惯性测量单元运动传感器模块，蓝牙发送模块，滤波降噪模块，无线充电模块；

所述惯性测量单元运动传感器模块是六轴的惯性测量单元运动传感器，用于记录双手在做按键动作时的运动信息，其包括三轴的加速度和三轴的角速度信息，该传感器位于五根手指以及手背处，手指处的传感器分别与手背处的传感器连接；

所述滤波降噪模块主要是对采集到的惯性测量单元的运动进行预处理，保证数据的有效性；

所述蓝牙发送模块主要是将数据手套的惯性测量单元运动信息发送至增强现实眼镜进行处理；

所述无线充电模块主要是用于给数据手套充电续航，无线充电也提高了键盘系统的便捷性。