[发明专利]人体场景图像本征分解与重光照方法和装置

摘要

本发明提出一种人体场景图像本征分解与重光照方法和装置，其中，方法包括：使用Clo3d制作人体模型，使用blender进行光线追踪进行渲染，得到训练数据集；使用单张图像预训练法线预测网络；将原始图像与预测得到的法线图作为图像本征分解网络的输入，预测得到反射率图、阴影图以及球谐光照参数；使用新的球谐光照参数对原图像进行重光照。最终将单张图片分解为反射率图与阴影图，可以实现图片重光照、3D模型合成、模型表面纹理重构等应用。在三维重建领域可以去除输入图片的阴影，提升三维重建模型的表面纹理质量。