[发明专利]视频数据实时处理方法及装置、计算设备

权利要求书

1.一种视频数据实时处理方法，其包括：

实时获取图像采集设备所拍摄和/或所录制的视频中的当前帧图像；或者，实时获取当前所播放的视频中的当前帧图像；

根据所述当前帧图像所对应的前帧图像中的面部关键区域，通过第一跟踪算法以及第二跟踪算法确定所述当前帧图像中的面部预测区域；

根据所述当前帧图像中的面部预测区域，确定所述当前帧图像中的面部关键区域；

对所述当前帧图像中的面部关键区域进行预设处理，得到处理后的当前帧图像，显示所述处理后的当前帧图像；

其中，所述根据所述当前帧图像所对应的前帧图像中的面部关键区域，通过第一跟踪算法以及第二跟踪算法确定所述当前帧图像中的面部预测区域的步骤具体包括：根据与所述前帧图像中的面部关键区域相对应的面部关键点，通过所述第一跟踪算法确定所述当前帧图像中的面部预测点；判断所述当前帧图像中的面部预测点与所述前帧图像中的面部关键区域相对应的面部关键点是否匹配；若是，根据所述当前帧图像中的面部预测点确定所述当前帧图像中的面部预测区域；若否，根据所述前帧图像中的面部关键区域，通过所述第二跟踪算法确定所述当前帧图像中的面部预测区域。

2.根据权利要求1所述的方法，其中，所述判断所述当前帧图像中的面部预测点与所述前帧图像中的面部关键区域相对应的面部关键点是否匹配的步骤具体包括：

确定所述当前帧图像中的面部预测点所对应的预测点特征信息；

确定所述前帧图像中的面部关键区域相对应的面部关键点所对应的关键点特征信息；

判断所述预测点特征信息与所述关键点特征信息之间的特征距离是否大于预设阈值，若否，确定所述当前帧图像中的面部预测点与所述前帧图像中的面部关键区域相对应的面部关键点匹配。

3.根据权利要求2所述的方法，其中，所述预测点特征信息和/或关键点特征信息通过像素颜色信息表示，其中，所述像素颜色信息包括：YUV颜色信息和/或RGB颜色信息。

4.根据权利要求1所述的方法，其中，所述根据所述当前帧图像中的面部预测区域，确定所述当前帧图像中的面部关键区域的步骤具体包括：

根据所述当前帧图像中的面部预测区域确定预测范围，在所述预测范围内通过神经网络算法预测面部关键点；

根据预测得到的面部关键点，确定所述当前帧图像中的面部关键区域。

5.根据权利要求4所述的方法，其中，所述根据预测得到的面部关键点，确定所述当前帧图像中的面部关键区域的步骤具体包括：

判断所述预测得到的面部关键点是否符合预设关键点规则；

若是，根据所述面部关键点确定所述当前帧图像中的面部关键区域；

若否，对所述当前帧图像进行检测，根据检测结果确定所述当前帧图像中的面部关键区域。

6.根据权利要求5所述的方法，其中，所述面部关键点包括：与面部五官和/或面部轮廓相对应的特征点。

7.根据权利要求1-6任一所述的方法，其中，所述对所述当前帧图像中的面部关键区域进行预设处理，得到处理后的当前帧图像的步骤具体包括：

在与所述面部关键区域相对应的位置绘制效果贴图；

将所述效果贴图和所述当前帧图像进行融合处理，得到处理后的当前帧图像。

8.根据权利要求1-6任一所述的方法，其中，所述当前帧图像所对应的前帧图像包括：所述当前帧图像的前N帧图像，其中，N为大于0的自然数。

9.根据权利要求1-6任一所述的方法，其中，所述面部关键区域通过面部关键框确定，和/或，所述面部预测区域通过面部预测框确定。

10.根据权利要求1-6中任一项所述的方法，其中，所述显示所述处理后的当前帧图像进一步包括：将所述处理后的当前帧图像实时显示；

所述方法还包括：将所述处理后的当前帧图像上传至云服务器。