[发明专利]人脸建模方法及相关产品

权利要求书

1.一种人脸建模方法，其特征在于，所述方法包括：

在目标人脸旋转过程中，获取所述目标人脸处于多个不同角度的多张第一图像，每一图像对应唯一角度；

对所述多张第一图像中的任一第一图像进行人脸检测，将所述任一第一图像划分为第一人脸区域和第一背景区域；

获取所述多张第一图像对应的深度图像，得到多张深度图像，依据所述第一人脸区域和第一背景区域对所述多张深度图像进行分割，得到多张目标人脸区域图像；

依据所述多张目标人脸区域图像进行3D人脸建模，得到3D人脸图像；

其中，确定所述多张目标人脸区域图像中每一目标人脸区域图像对应的兴趣点集合，得到多个兴趣点集合，所述多个兴趣点集合中每一兴趣点集合包含至少一个兴趣点，每一兴趣点集合对应一个角度值；

将所述多个兴趣点集合中所有兴趣点的深度信息输入至预设三维卷积神经网络中，得到多个几何描述符，所述预设三维卷积神经网络用于对所有兴趣点的深度信息进行运算得到；

将所述多个兴趣点集合进行两两分组，得到多个分组，每一分组包含的两个兴趣点集合对应的角度值互为相邻，将所述多个分组中每一分组内的两个兴趣点集合进行匹配，得到多个目标兴趣点集合，每一目标兴趣点集合至少包含一个目标兴趣点对，目标兴趣点对为在匹配过程中匹配成功的两个兴趣点，每一分组对应一个目标兴趣点集合；根据所述多个目标兴趣点集合中每一目标兴趣点集合中的至少一对兴趣点，将所述多张目标人脸区域图像中每一分组对应的两张目标人脸区域图像进行拼接，得到所述3D人脸图像。

2.根据权利要求1所述的方法，其特征在于，所述在目标人脸旋转过程中，获取所述目标人脸处于多个不同角度的多张第一图像，包括：

在所述目标人脸旋转过程中，检测所述目标人脸旋转的角速度；

判断所述角速度是否小于预设阈值，若是，则获取所述目标人脸处于多个不同角度的多张第一图像。

3.根据权利要求1或2所述的方法，其特征在于，所述对所述多张第一图像中的任一第一图像进行人脸检测，将所述任一第一图像划分为第一人脸区域和第一背景区域，包括：

对所述任一第一图像进行预处理，得到第二图像；

对所述第二图像进行特征点提取，得到多个目标特征点；

根据所述多个目标特征点构造所述目标人脸的外围轮廓，将所述外围轮廓范围内作为所述第一人脸区域，所述外围轮廓外作为所述第一背景区域。

4.根据权利要求1至2任一项所述的方法，其特征在于，所述依据所述第一人脸区域和第一背景区域对所述多张深度图像进行分割，得到多张目标人脸区域图像，包括：

根据所述多张深度图像中每一深度图像的深度信息，将所述每一深度图像划分为第二人脸区域和第二背景区域，得到多个第二人脸区域和多个第二背景区域；

将所述多个第二人脸区域分别与所述第一人脸区域进行匹配，得到多个第一子区域，每一所述第一子区域为一个所述第二人脸区域中与所述第一人脸区域匹配成功的区域，并将所述多个第二背景区域分别与所述第一背景区域进行匹配，得到多个第二子区域，每一所述第二子区域为一个所述第二背景区域中与所述第一背景区域匹配失败的区域；

根据所述多个第一子区域和所述多个第二子区域，合成所述多张目标人脸区域图像。

5.根据权利要求3所述的方法，其特征在于，所述依据所述第一人脸区域和第一背景区域对所述多张深度图像进行分割，得到多张目标人脸区域图像，包括：

根据所述多张深度图像中每一深度图像的深度信息，将所述每一深度图像划分为第二人脸区域和第二背景区域，得到多个第二人脸区域和多个第二背景区域；

将所述多个第二人脸区域分别与所述第一人脸区域进行匹配，得到多个第一子区域，每一所述第一子区域为一个所述第二人脸区域中与所述第一人脸区域匹配成功的区域，并将所述多个第二背景区域分别与所述第一背景区域进行匹配，得到多个第二子区域，每一所述第二子区域为一个所述第二背景区域中与所述第一背景区域匹配失败的区域；

根据所述多个第一子区域和所述多个第二子区域，合成所述多张目标人脸区域图像。