[发明专利]三维人体重建方法及装置

说明书

本发明提供一种三维人体重建方法及装置，该方法包括：获取目标人体实例的图像，作为目标图像；将目标图像输入三维人体重建模型，获取三维人体重建模型输出的目标人体实例的三维人体重建结果；其中，三维人体重建模型，用于基于每一预设采样点对应的图像特征和蒙皮参数对目标人体实例进行三维人体重建，图像特征基于目标图像确定，蒙皮参数基于对应的图像特征确定，各预设采样点在三维空间中均匀分布。本发明提供的三维人体重建方法及装置，能在无需依赖标定好相机参数的图像传感器的情况下，无拘束的获取目标人体实例的图像，从而能更简单、更高效的进行三维人体重建，能实现更广泛的适用于各类场景的三维人体重建。

技术领域

本发明涉及计算机视觉技术领域，尤其涉及一种三维人体重建方法及装置。

背景技术

三维人体重建是计算机图形学和计算机视觉领域的重点问题。目前，三维人体重建已广泛应用于虚拟现实AR/VR、影视娱乐、虚拟试穿以及工业制造等各个领域。

现有的三维人体重建方法，可以基于包括人体实例的2D图像，构建上述人体实例的三维模型。但是，现有的三维人体重建方法的局限性较强，例如：上述2D图像需要依赖标定好相机参数的图像传感器获取；或者，上述2D图像需要依赖价格昂贵的激光扫描仪或者多相机阵列系统获取，导致现有的三维人体重建方法难以广泛适用于各类场景。

发明内容

本发明提供一种三维人体重建方法及装置，用以解决现有技术难以广泛适用于各类场景的缺陷，实现更广泛的适用于各类场景。

本发明提供一种三维人体重建方法，包括：

获取目标人体实例的图像，作为目标图像；

将所述目标图像输入三维人体重建模型，获取所述三维人体重建模型输出的所述目标人体实例的三维人体重建结果；

其中，所述三维人体重建模型，是基于样本人体实例的三维模型以及样本图像进行训练后得到的，所述样本图像包括所述样本人体实例的三维模型；

所述三维人体重建模型，用于基于每一预设采样点对应的图像特征和蒙皮参数对所述目标人体实例进行三维人体重建，所述图像特征基于所述目标图像确定，所述蒙皮参数基于对应的图像特征确定，各所述预设采样点在三维空间中均匀分布。

根据本发明提供的一种三维人体重建方法，所述样本人体实例的三维模型，包括所述样本人体实例的第一样本模型、第二样本模型和第三样本模型，所述第一样本模型和第三样本模型的姿态相同，所述第二样本模型的姿态为预设的标准姿态，所述第一样本模型和所述第三样本模型的获取方式不同；所述样本图像包括所述第一样本模型；

所述三维人体重建模型，包括：图像特征提取层、蒙皮参数提取层、注意力机制层和结果输出层；

相应地，所述将所述目标图像输入三维人体重建模型，获取所述三维人体重建模型输出的所述目标人体实例的三维人体重建结果，具体包括：

将所述目标图像和每一预设采样点的位置信息输入所述图像特征提取层，获取所述图像特征提取层输出的每一预设采样点对应的图像特征；

将所述每一预设采样点的位置信息以及对应的图像特征输入所述蒙皮参数提取层，获取所述蒙皮参数提取层输出的所述每一预设采样点对应的蒙皮参数；

将所述每一预设采样点的位置信息、对应的图像特征以及蒙皮参数输入所述注意力机制层，获取所述注意力机制层输出的所述每一预设采样点的标识信息，所述标识信息用于指示所述每一预设采样点位于或未位于所述目标人体实例的三维人体模型内部；

将所述每一预设采样点的标识信息，输入所述结果输出层，获取所述结果输出层输出的所述三维人体重建结果，所述三维人体重建结果，包括所述目标人体实例的第一模型，所述第一模型的姿态为所述标准姿态。