[发明专利]图像处理和重构图像生成的方法和装置

权利要求书

1.一种处理器实现的方法，所述方法包括：

使用基于神经网络的一个或多个提取模型，基于包括对象的输入图像数据来确定规范空间中的反照率数据和所述规范空间中的深度数据；

通过将目标形状变形值分别应用于所述反照率数据和所述深度数据来生成变形的反照率数据和变形的深度数据；

通过基于所述变形的深度数据和目标照度值执行着色来生成结果着色数据；

基于所述结果着色数据和所述变形的反照率数据来生成中间图像数据；以及

基于目标姿态值根据所述中间图像数据和所述变形的深度数据来生成重构的图像数据。

2.根据权利要求1所述的方法，其中，确定所述反照率数据和所述深度数据包括：

使用基于神经网络的反照率提取模型根据所述输入图像数据来确定所述规范空间中的所述反照率数据；以及

使用基于神经网络的深度提取模型根据所述输入图像数据来确定所述规范空间中的所述深度数据。

3.根据权利要求1所述的方法，其中，

所述规范空间中的所述反照率数据与当所述对象被变形为作为参考的规范形状时的反照率数据相对应，以及

所述规范空间中的所述深度数据与当所述对象被变形为所述规范形状时的深度数据相对应。

4.根据权利要求1所述的方法，其中，生成所述变形的反照率数据和所述变形的深度数据包括：

基于所述目标形状变形值对所述反照率数据和所述深度数据中的每一个执行向后扭曲操作。

5.根据权利要求1所述的方法，其中，生成所述结果着色数据包括：

从所述变形的深度数据中提取所述对象的表面法线元素；以及

通过基于所提取的表面法线元素和所述目标照度值执行着色来生成所述结果着色数据。

6.根据权利要求1所述的方法，其中，生成所述结果着色数据包括：

使用二阶球谐函数执行所述着色。

7.根据权利要求1所述的方法，其中，生成所述重构的图像数据包括：

通过基于所述目标姿态值对所述中间图像数据和所述变形的深度数据中的每一个中的对象的姿态进行变形，并且将所述对象的姿态被变形的所述中间图像数据和所述对象的姿态被变形的深度数据进行组合，来生成所述重构的图像数据。

8.根据权利要求1所述的方法，其中，

所述目标形状变形值、所述目标照度值和所述目标姿态值是从与所述输入图像数据不同的另一输入图像数据中提取的值，以及

所述另一输入图像数据中的对象与所述输入图像数据中的所述对象相同。

9.根据权利要求1所述的方法，其中，所述目标形状变形值、所述目标照度值和所述目标姿态值是从另一图像数据中提取的值，所述另一图像数据包括与所述输入图像数据中的所述对象不同的对象。

10.根据权利要求1所述的方法，其中，所述目标形状变形值、所述目标照度值和所述目标姿态值是使用除所述基于神经网络的一个或多个提取模型之外的基于神经网络的提取模型从另一输入图像数据中提取的值。

11.根据权利要求1所述的方法，其中，

从另一图像数据中提取所述目标形状变形值、所述目标照度值和所述目标姿态值，以及

通过基于所述重构的图像数据和所述另一图像数据更新所述一个或多个提取模型的参数，来训练所述一个或多个提取模型。

12.一种存储指令的非暂时性计算机可读存储介质，所述指令在由处理器执行时配置所述处理器执行根据权利要求1所述的方法。