[发明专利]视频图像的处理方法及装置

说明书

本发明实施例提供了一种视频图像的处理方法及装置，其中，该方法包括：识别实时采集的视频图像中的人脸信息，所述人脸信息包括人脸定位信息和人脸姿态信息；根据人脸定位信息和人脸姿态信息确定目标三维模型在所述视频图像中的加载位置和偏转角度；根据所述加载位置和偏转角度将所述目标三维模型加载到所述视频图像中人脸对应的显示区域。本发明实施例提供的视频图像的处理方法及装置，通过在实时采集的视频图像中增加三维模型的特效显示，并根据人脸信息控制三维模型的显示，实现模型与人脸的交互效果，有效地提高了直播过程的趣味性，提升用户体验。

技术领域

本发明涉及计算机网络技术领域，尤其涉及一种视频图像的处理方法及装置。

背景技术

随着计算机和互联网技术的不断发展，视频技术越来越多的应用在人们的日常生活和工作中，如视频聊天、视频游戏、视频直播以及网络视频教学等。人们对视频技术的要求也日益增高，越来越多的人希望视频图像能够满足他们多样的个性化需求，因此，视频特效技术应运而生，它可以使视频内容变得更加丰富，效果更加逼真。例如，当人们用电脑摄像头进行视频交流时，视频特效技术可以呈现出诸如特效字体显示、特效动画等多样的视频画面，以满足人们不同的个性化需要。

通常，视频特效技术都是在二维平面上来完成的，通过对视频中信息的定位和跟踪，直接在二维图像空间上，对二维图像进行滤波来实现如马赛克、人脸模糊、人脸替换等特效。在这些视频特效中，各种视频背景图案的变换实质上是二维图像的重叠，也就是实现一些比较简单的特效效果。目前，三维视频特效的产品还很少。一些单纯的三维特效虽然可以实现一定的特效效果，但这种单纯的三维特效是按照设定的程序运行，缺乏趣味性，用户体验差。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的视频图像的处理方法及装置。

本发明的一个方面，提供了一种视频图像的处理方法，包括:

识别实时采集的视频图像中的人脸信息，所述人脸信息包括人脸定位信息和人脸姿态信息；

根据人脸定位信息和人脸姿态信息确定目标三维模型在所述视频图像中的加载位置和偏转角度；

根据所述加载位置和偏转角度将所述目标三维模型加载到所述视频图像中人脸对应的显示区域。

其中，所述根据人脸定位信息和人脸姿态信息确定目标三维模型在所述视频图像中的加载位置和偏转角度，包括：

根据所述人脸定位信息确定所述目标三维模型加载到所述视频图像中的位置平移矩阵；

根据所述位置平移矩阵以及所述人脸姿态信息确定所述目标三维模型加载到所述视频图像中的旋转矩阵；

根据所述旋转矩阵以及所述目标三维模型对应的投影矩阵和视图矩阵，确定所述目标三维模型的加载位置。

其中，在所述确定所述目标三维模型加载到所述视频图像中的旋转矩阵之后，还包括：

根据所述视频图像中人脸对应的显示区域的缩放比例，控制所述目标三维模型以相同缩放比例进行显示。

其中，所述根据所述加载位置和偏转角度将所述目标三维模型加载到所述视频图像中人脸对应的显示区域，包括：

基于所述加载位置和偏转角度，采用图形程序接口或多媒体编程接口将所述目标三维模型加载到所述视频图像中人脸对应的显示区域。

其中，在所述根据所述加载位置和偏转角度将所述目标三维模型加载到所述视频图像中人脸对应的显示区域之后，还包括：

获取所述视频图像中实时更新的人脸信息，调整所述目标三维模型在所述视频图像中的加载位置和偏转角度；

根据调整后的加载位置和偏转角度，更新所述目标三维模型在所述视频图像中的显示状态。