[发明专利]手语识别方法及装置、计算机存储介质、电子设备

权利要求书

1.一种手语识别方法，其特征在于，包括：

基于目标检测算法提取待识别的手语视频中包含的手势图像，获取所述手势图像对应的特征向量；

将所述特征向量输入训练好的手语识别模型中，根据所述手语识别模型的输出，得到所述手势图像对应的手语识别结果；

根据自然语言处理算法对所述手语识别结果进行处理，得到所述手势图像对应的文本识别结果。

2.根据权利要求1所述的方法，其特征在于，在得到所述手势图像对应的文本识别结果之后，所述方法还包括：

将所述文本识别结果与预先设定的标准文本进行匹配，将匹配成功的标准文本作为所述手势图像的最终识别结果。

3.根据权利要求1或2所述的方法，其特征在于，在基于目标检测算法提取待识别的手语视频中包含的手势图像之后，所述方法还包括：

根据图像分类算法对所述手势图像进行分类，得到图像分类结果；

当所述图像分类结果为非业务类型时，舍弃所述手势图像。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

当所述图像分类结果为业务类型时，对所述手势图像进行二值化处理，以得到二值化图像；

对得到的所述二值化图像进行形态学处理。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

将所述待识别的手语视频对应的文件大小调整为第一目标数值；

将所述待识别的手语视频对应的视频帧率调整为第二目标数值；

将所述待识别的手语视频对应的视频格式转换为目标格式。

6.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取手势图像样本以及所述手势图像样本对应的标签信息；所述标签信息用于标识所述手势图像样本对应的语义文本；

根据所述手势图像样本与所述标签信息训练机器学习模型，以得到所述手语识别模型。

7.根据权利要求1所述的方法，其特征在于，所述根据自然语言处理算法对所述手语识别结果进行处理，得到所述手势图像对应的文本识别结果，包括：

根据自然语言处理算法对所述手语识别结果进行去重、纠错和/或消除歧义处理，得到所述手势图像对应的文本识别结果。

8.一种手语识别装置，其特征在于，包括：

提取模块，用于基于目标检测算法提取待识别的手语视频中包含的手势图像，获取所述手势图像对应的特征向量；

识别模块，用于将所述特征向量输入训练好的手语识别模型中，根据所述手语识别模型的输出，得到所述手势图像对应的手语识别结果；

处理模块，用于根据自然语言处理算法对所述手语识别结果进行处理，得到所述手势图像对应的文本识别结果。

9.一种计算机存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1～7中任意一项所述的手语识别方法。

10.一种电子设备，其特征在于，包括：

处理器；以及

存储器，用于存储所述处理器的可执行指令；

其中，所述处理器配置为经由执行所述可执行指令来执行权利要求1～7中任意一项所述的手语识别方法。