[发明专利]对象三维重建方法、装置、电子设备及存储介质

说明书

本公开是一种对象三维重建方法、装置、电子设备及存储介质，涉及计算机视觉技术领域，用以解决对象三维重建效率低的问题。本公开方法包括：获取二维目标图像中对象各部位关键信息；基于关键信息获得第一差异和第二差异确定的损失函数，第一差异为根据三维目标网格投影确定的关键信息与根据二维目标图像获取的关键信息的差异，第二差异为三维目标网格中各顶点与相邻顶点的相对位置，与预设三维网格中各顶点与相邻顶点的相对位置的差异；根据损失函数取最小值时使用的三维目标网格中各顶点的位置坐标三维重建，生成与对象对应的三维模型。由于本公开并非直接在三维空间构建三维模型，而是基于二维图像获取三维网格，进而生成三维模型，效率更高。

技术领域

本公开涉及计算机视觉技术领域，尤其涉及一种对象三维重建方法、装置、电子设备及存储介质。

背景技术

随着自拍、短视频等功能的普及，对象美颜及相关脸部特效的需求也逐渐加强。其中，很多特效依赖于3D(Three Dimensions，三维)人头模型，例如影视动漫特效等，其中就包含二次元风格的3D人头模型。如何使用较少的设计资源建立大量的二次元3D人头模型供线上特效使用，成为了一个非常重要的问题。相关技术方案中，依靠3D设计师设计每一个二次元3D人头模型，每个人头模型大概要耗费2个人一周的时间，设计工作量巨大。

综上，目前还没有一种简单高效的方法供设计师使用，因此在设计二次元3D人头模型比较耗时，效率较低。

发明内容

本公开提供一种对象三维重建方法、装置、电子设备及存储介质，以至少解决相关技术中对象三维重建效率低的问题。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种对象三维重建方法，包括：

获取二维目标图像包含的对象中各个部位的关键信息，其中所述关键信息包括关键点和/或蒙版图像；

基于所述关键信息，获得由第一差异和第二差异确定的损失函数，其中所述第一差异为根据所述对象的三维目标网格在二维空间的投影确定的关键信息与根据所述二维目标图像获取的关键信息之间的差异，所述第二差异为所述三维目标网格中各个顶点与相邻顶点的相对位置，与所述对象的预设三维网格中各个顶点与相邻顶点的相对位置之间的差异；

确定所述损失函数取最小值时所使用的三维目标网格中各个顶点的位置坐标；

根据确定的各个顶点的位置坐标进行三维重建，生成与所述对象对应的三维模型。

在一种可选的实施方式中，所述二维目标图像是按照预设图层次序将所述各个部位的分层图像叠加得到的，每个所述分层图像包括至少一个对象的部位，不同的分层图像包括的部位不同；

所述获取二维目标图像包含的对象中各个部位的关键信息，包括：

获取所述二维目标图像包含的对象中各个部位的分层图像，其中所述各个部位的分层图像是根据预设的各个部位的分层模板生成的；

从所述各个部位的分层图像中提取与各个部位对应的关键信息。

在一种可选的实施方式中，所述获取二维目标图像包含的对象中各个部位的关键信息，包括：

针对任意一个部位，将所述二维目标图像中与所述部位对应的图像转换为蒙版图像，并将所述蒙版图像作为所述部位的关键信息；或

针对任意一个部位，提取所述部位在所述二维目标图像中对应的关键点，并将提取的关键点作为所述部位的关键信息。

在一种可选的实施方式中，在所述基于所述关键信息，获得由第一差异和第二差异确定的损失函数之前，还包括：