[发明专利]实时三维人体重建的纹理渲染方法、系统、芯片、设备和介质

权利要求书

1.一种实时三维人体重建的纹理渲染方法，其特征在于包括：

S1，获取拍摄对象的当前人体模型和深度图像；

S2，选取一个当前人体模型作为标准模型，将其顶点重投影至深度图像，提取顶点对应的颜色信息及图像坐标，该颜色信息为颜色初始值，图像坐标转换成纹理坐标；

S3，将后续的人体模型同样进行S2操作，并将其顶点的颜色信息与颜色初始值计算加权和，作为标准模型顶点的新颜色；

S4，计算当前人体模型的子纹理贴图和子掩膜，并将纹理贴图和掩膜分别组合成完整的纹理图和掩膜；最终根据纹理图、纹理坐标进行渲染。

2.根据权利要求1所述的实时三维人体重建的纹理渲染方法，其特征在于：S4中，基于改进的泊松融合，用所生成的掩膜对纹理图进行优化，以去除从各个视角取颜色带来的颜色差异和裂缝，最终平滑颜色过渡区域。

3.根据权利要求1或2所述的实时三维人体重建的纹理渲染方法，其特征在于：S1中，通过多目相机系统同步采集拍摄对象的彩色图像和深度图像。

4.根据权利要求3所述的实时三维人体重建的纹理渲染方法，其特征在于：利用dynamic fusion对彩色图像和深度图像优化，生成准确真实的当前人体模型。

5.根据权利要求3所述的实时三维人体重建的纹理渲染方法，其特征在于：所述多目相机系统为三个以上能实现同步拍摄的深度相机组。

6.根据权利要求5所述的实时三维人体重建的纹理渲染方法，其特征在于：所述深度相机组为呈环形均匀分布的六个微软Azure Kinect相机。

7.根据权利要求1所述的实时三维人体重建的纹理渲染方法，其特征在于：S2中，选取首个生成的当前人体模型作为全局标准模型，且该模型为动画模型,即模型的拓扑结构发生变化时，两模型顶点也可以根据索引一一对应。

8.根据权利要求1所述的实时三维人体重建的纹理渲染方法，其特征在于：S2中，对标准模型对模型进行网格划分。

9.根据权利要求8所述的实时三维人体重建的纹理渲染方法，其特征在于：所述网格划分为：假设每个三角面片的分辨率为R，分辨率为1时，则表示不划分该面片；当分辨率R大于1时，则对网格进行划分，产生的顶点数量则为(R+1)*(R+2)/2，面片数量为R²；新划分的顶点坐标通过重心坐标系确定，即为三个原顶点坐标的加权和，其权重为(0≤i≤R且0≤j≤R-i)。

10.根据权利要求1、8、9任一所述的实时三维人体重建的纹理渲染方法，其特征在于：重投影获得的顶点颜色循环地与该顶点颜色初始值进行融合，融合策略如下：

W_i(p)←min(W_i(p)+w_i(p),w_max)

其中，A_i为顶点颜色初始值，W_i为顶点现有颜色累积权重，a_i为顶点当前重投影颜色，w_i为顶点重投影颜色的权重。