[发明专利]三维照片生成方法、装置、计算机设备和存储介质

权利要求书

1.一种三维照片生成方法，其特征在于，所述方法包括：

根据针对三维场景拍摄的单张二维照片，确定所述二维照片对应的深度图；

根据所述深度图中的深度值对所述深度图进行分层，得到多层子深度图，并相应得到所述二维照片对应的多层子照片；

对所述多层子深度图和所述多层子照片的各层中的遮挡区域进行修复，得到多层修复子深度图和多层修复子照片；每层中的所述遮挡区域是指被在先层的图像内容遮挡住的区域；

根据所述多层修复子深度图和所述多层修复子照片，生成所述三维场景对应的包含多个视角的三维照片。

2.根据权利要求1所述的方法，其特征在于，所述根据所述多层修复子深度图和所述多层修复子照片，生成所述三维场景对应的包含多个视角的三维照片包括：

根据所述多层修复子深度图和所述多层修复子照片进行三维重建，得到所述三维场景对应的原始视角下的三维点云；所述原始视角是所述二维照片的拍摄视角；

根据所述原始视角下的三维点云，生成所述三维场景对应的多个视角下的三维点云；

分别根据各个视角下的三维点云进行渲染投影，得到多帧图像；

根据所述多帧图像，生成所述三维场景对应的包含多个视角的三维照片。

3.根据权利要求2所述的方法，其特征在于，所述根据所述原始视角下的三维点云，生成所述三维场景对应的多个视角下的三维点云包括：

根据针对待生成的所述三维照片设置的时长，确定所述三维照片的帧数；

根据针对待生成的所述三维照片设置的视角变换参数变化范围和所述帧数，确定多组视角变换参数；

分别根据各组所述视角变换参数，对所述原始视角下的三维点云进行视角变换，生成所述三维场景对应的多个视角下的三维点云。

4.根据权利要求2所述的方法，其特征在于，所述方法还包括：

对所述二维照片进行对象分割处理，得到对象分割图像和相应的对象语义标签；

若所述对象语义标签中存在目标对象语义标签，则根据所述目标对象语义标签在所述对象分割图像中对应的图像内容和所述二维照片进行语义三维重建，生成所述目标对象语义标签所对应的目标对象的三维点云；

所述根据所述多层修复子深度图和所述多层修复子照片进行三维重建，得到所述三维场景对应的原始视角下的三维点云包括：

根据所述多层修复子深度图和所述多层修复子照片进行三维重建，得到所述三维场景对应的原始视角下的初始三维点云；

根据所述初始三维点云和所述目标对象的三维点云，得到所述三维场景对应的原始视角下的三维点云。

5.根据权利要求1所述的方法，其特征在于，所述根据所述深度图中的深度值对所述深度图进行分层，得到多层子深度图，并相应得到所述二维照片对应的多层子照片包括：

从所述深度图中确定深度分层边界；所述深度分层边界是所述深度图中深度值突变的位置；

根据所述深度分层边界，将所述深度图划分为多个区域；

将各个区域的中心作为聚类中心，根据所述深度图中的深度值，对所述深度图中的各个像素点进行聚类，得到多层子深度图；其中，每层子深度图是根据聚类得到的其中一个聚类簇中的各个像素点确定的；

根据所述多层子深度图的分层情况，得到所述二维照片对应的多层子照片。

6.根据权利要求5所述的方法，其特征在于，所述从所述深度图中确定深度分层边界包括：

分别对所述二维图像对应的对象分割图像和所述深度图进行边缘检测，得到第一边界图像和第二边界图像；

将所述第一边界图像和所述第二边界图像进行融合，得到深度分层边界。

7.根据权利要求1所述的方法，其特征在于，所述对所述多层子深度图和所述多层子照片的各层中的遮挡区域进行修复，得到多层修复子深度图和多层修复子照片包括：

针对每一层的子深度图，根据本层的子深度图中未遮挡区域的图像内容，对所述本层的子深度图中的遮挡区域的图像内容进行修复，得到多层修复子深度图；

针对每一层的子照片，根据本层的子照片中未遮挡区域的图像内容，对所述本层的子照片中的遮挡区域的图像内容进行修复，得到多层修复子照片。