[发明专利]一种手势跟踪方法、设备及计算机可读存储介质

说明书

本发明提供一种手势跟踪方法、设备及计算机可读存储介质，解决现有手势追踪方法难以准确地识别手势的问题。本发明的方法包括：根据骨骼关键点模型，在图像中确定手势追踪区域；根据手势识别模型，在所述手势追踪区域内识别出手势；获取所述手势的预设位置的置信度信息；在所述置信度信息满足预设条件的情况下，确定所述手势为有效手势。本发明在根据骨骼关键点模型确定的手势追踪区域中进行手势识别，而不是在全图中进行手势识别，缩小了手势检测范围，且在所述手势追踪区域内识别出手势后，根据手势的预设位置的置信度信息对识别出的手势进行进一步验证，从而有效保证了手势识别的准确率。

技术领域

本发明实施例涉及多媒体通信技术领域，尤其是涉及一种手势跟踪方法、设备及计算机可读存储介质。

背景技术

网络技术的发展，使得视频交互应用在人们的日常生活中非常流行。随着应用功能的增加，用户可以通过手势控制在视频中增加多种多样的视频特效。此时，对用户手势检测的结果精度直接影响视频特效的展示。

发明内容

本发明实施例提供一种手势跟踪方法、设备及计算机可读存储介质，以解决现有手势追踪方法难以准确地识别手势的问题。

第一方面，本发明的实施例提供了一种手势跟踪方法，包括：

根据骨骼关键点模型，在图像中确定手势追踪区域；

根据手势识别模型，在所述手势追踪区域内识别出手势；

获取所述手势的预设位置的置信度信息；

在所述置信度信息满足预设条件的情况下，确定所述手势为有效手势。

可选地，在所述根据手势识别模型，在所述手势追踪区域内识别出手势之前，还包括：

对所述手势跟踪区域进行去模糊处理和补帧处理，得到处理后的手势跟踪区域；则，

所述根据手势识别模型，在所述手势追踪区域内识别出手势，包括：

根据手势识别模型，在处理后的手势跟踪区域内识别出手势。

可选地，在所述获取所述手势的预设位置的置信度信息之前，还包括：

确定所述手势的旋转角度；以及，

根据所述旋转角度，对所述手势进行旋转；则，

所述获取所述手势的预设位置的置信度信息，包括：

获取旋转后的所述手势的预设位置的置信度信息。

可选地，所述确定所述手势跟踪区域的旋转角度，包括：

通过手势识别模型，确定所述手势中的第一位置和第二位置，其中，所述第一位置和所述第二位置的连线用于指示所述手势对应的手掌中的预设手指处于伸开状态时的方向；

确定所述第一位置和第二位置之间的连线与基准线之间的夹角；

根据所述夹角，确定所述手势跟踪区域的旋转角度。

可选地，所述确定所述第一位置和第二位置之间的连线与基准线之间的夹角，包括：

通过公式β＝arctan2(|x1-x2|/|y1-y2|)，确定所述第一位置和第二位置之间的连线与基准线之间的夹角；

其中，β表示所述夹角，x1表示所述第一位置的横坐标，y1表示所述第一位置的纵坐标，x2表示所述第二位置的横坐标，y2表示所述第二位置的纵坐标。

可选地，所述根据所述旋转角度，对所述手势跟踪区域进行旋转，包括：

根据所述旋转角度，基于仿射变换，对所述手势跟踪区域进行旋转。