[发明专利]三维模型生成方法、装置、计算机设备及存储介质

说明书

本公开提供了一种三维模型生成方法及装置，其中，该方法包括：获取包括第一人脸的第一图像；基于所述第一图像，确定包括第一人脸的轮廓信息的第一点云数据；基于所述第一点云数据以及所述第一图像，确定所述第一人脸的第一反射率信息以及包括所述第一人脸的细节信息的第二点云数据；基于所述第一反射率信息以及所述第二点云数据，生成所述第一人脸的三维模型。本公开示例得到的第一人脸的三维模型中，既包括了第一人脸的反射率信息，又包含了第一人脸的轮廓信息和细节信息，因而生成的第一人脸的三维模型具有更高的真实度。

技术领域

本公开涉及三维重建技术领域，具体而言，涉及一种三维模型生成方法、装置、计算机设备及存储介质。

背景技术

数字化人脸三维模型生成在影视，游戏，虚拟社交等领域有着重要的作用。基于单张图片人脸生成(重建)的方法由于数据采集仅依赖廉价的网络摄像头，且方便在移动端应用，因而有着巨大的应用价值。

当前的人脸三维模型生成方法，存在生成的人脸三维模型精度低的问题。

发明内容

本公开实施例至少提供一种三维模型生成方法、装置、计算机设备及存储介质。

第一方面，本公开实施例提供了一种三维模型生成方法，包括：获取包括第一人脸的第一图像；基于所述第一图像，确定包括第一人脸的轮廓信息的第一点云数据；基于所述第一点云数据以及所述第一图像，确定所述第一人脸的第一反射率信息以及包括所述第一人脸的细节信息的第二点云数据；基于所述第一反射率信息以及所述第二点云数据，生成所述第一人脸的三维模型。

首先基于第一图像，确定包括第一人脸的轮廓信息的第一点云数据，然后基于第一点云数据以及第一图像，确定第一人脸的第一反射率信息、以及包括第一人脸的细节信息的第二点云数据，并基于第一反射率信息以及第二点云数据得到三维模型，使得得到的第一人脸的三维模型中，既包括了第一人脸的反射率信息，又包含了第一人脸的轮廓信息和细节信息，因而生成的第一人脸的三维模型具有更高的真实度。

一种可能的实施方式中，所述基于所述第一点云数据以及所述第一图像，确定所述第一人脸的第一反射率信息以及包括所述第一人脸细节信息的第二点云数据，包括：基于所述第一点云数据以及所述第一图像，确定所述第一人脸的第一人脸纹理图；对所述第一人脸纹理图进行反射率信息的预测处理，得到所述第一人脸的第一反射率信息；以及对所述第一人脸纹理图进行人脸细节的预测处理，并基于所述人脸细节的预测处理的结果，得到所述第一人脸的第二点云数据。

这样，通过对第一人脸纹理图的第一反射率信息和人脸细节的预测处理，得到包括了人脸轮廓、人脸细节、以及人脸反射率的第二点云数据，该第二点云数据能够更精确的表征人脸的三维模型。

一种可能的实施方式中，所述第一点云数据包括：构成所述第一人脸的多个第一点云点分别在相机坐标系下的三维坐标值、以及不同所述第一点云点之间的连接关系信息。

一种可能的实施方式中，所述基于所述第一点云数据以及所述第一图像，确定所述第一人脸的第一人脸纹理图，包括：基于多个所述第一点云点分别在相机坐标系下的三维坐标值，将多个所述第一点云点分别与所述第一图像中的多个第一像素点进行对齐处理；基于对齐处理的结果、不同所述第一点云点之间的连接关系信息以及所述第一图像中各个第一像素点的第一像素值，确定构成所述第一人脸的多个面片分别对应的第二像素值；其中，任一所述面片为由至少三个具有连接关系的第一点云点构成；基于所述多个面片分别对应的第二像素值，生成所述第一人脸纹理图。

这样，生成的第一人脸纹理图中会尽可能的保留第一图像中的特征，进而能够基于第一人脸纹理图更好的得到人脸的三维模型。

一种可能的实施方式中，所述人脸细节的预测处理的结果包括：所述第一人脸的第一人脸细节信息；所述基于所述细节预测处理的结果，得到所述第一人脸的第二点云数据，包括：将所述第一点云数据以及所述第一人脸细节信息进行融合处理，得到所述第二点云数据。