[发明专利]三维人物模型构建方法、装置及存储介质有效
申请号: | 202010177642.4 | 申请日: | 2020-03-13 |
公开(公告)号: | CN111401234B | 公开(公告)日: | 2022-06-14 |
发明(设计)人: | 张煜;邵志兢;谢俊 | 申请(专利权)人: | 深圳普罗米修斯视觉技术有限公司 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/25;G06V10/26;G06T3/00;G06T17/00 |
代理公司: | 深圳市宏德雨知识产权代理事务所(普通合伙) 44526 | 代理人: | 李捷 |
地址: | 518000 广东省深圳市宝安区石岩*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 三维 人物 模型 构建 方法 装置 存储 介质 | ||
1.一种三维人物模型构建方法,其特征在于,包括:
从目标图像中分离人物图像,并生成所述人物图像对应的人物轮廓图;
对所述人物图像进行二维姿态预估,得到所述人物图像的姿态特征;
基于预设三维人物模型以及所述姿态特征,生成对应的预设二维网格顶点投影图;
获取所述预设二维网格顶点投影图的参照轮廓图,并计算所述人物轮廓图的像素点与所述参照轮廓图的像素点的映射关系;
基于所述预设三维人物模型,对所述人物轮廓图的像素点进行反投影计算,获取所述人物轮廓图的像素点的三维位置坐标;
以所述人物轮廓图的像素点为控制点,基于所述预设二维网格顶点投影图中的网格顶点的拓扑关系,计算所述人物图像的其他像素点的三维位置坐标;
基于所述人物图像的所有像素点的三维位置坐标构建三维人物模型;
其中基于下述公式计算所述人物轮廓图的像素点与所述参照轮廓图的像素点的映射关系:
其中pi为人物轮廓图上的像素点,为参照轮廓图上的对应像素点,φ[i]用于表示该映射关系对应的映射空间,κ为预设参数。
2.根据权利要求1所述的三维人物模型构建方法,其特征在于,所述对所述人物图像进行姿态预估,得到所述人物图像的姿态特征的步骤包括:
基于所述人物图像中的人体关节点特征以及骨架走向特征进行姿态预估,以得到所述人物图像的姿态特征。
3.根据权利要求1所述的三维人物模型构建方法,其特征在于,所述基于预设三维人物模型以及所述姿态特征,生成对应的预设二维网格顶点投影图的步骤包括:
将所述姿态特征作为参数输入至SMPL人体参数化三维模型框架,得到所述人物图像对应姿态的SMPL人体参数化三维模型;
将所述SMPL人体参数化三维模型正视投影到二维图像空间,得到对应的预设二维网格顶点投影图。
4.根据权利要求1所述的三维人物模型构建方法,其特征在于,基于下述公式获取所述人物轮廓图的像素点的三维位置坐标:
其中M为目标图像相机的预设内参矩阵,R为预设外参旋转矩阵,T为预设外参平移向量,Z为预设基准参数,u、v为人物轮廓图的像素点的二维坐标,Xw、Yw、Zw为人物轮廓图的像素点的三维位置坐标。
5.根据权利要求1所述的三维人物模型构建方法,其特征在于,所述以所述人物轮廓图的像素点为控制点,基于所述预设二维网格顶点投影图中的网格顶点的拓扑关系,计算所述人物图像的其他像素点的三维位置坐标的步骤包括:
基于SMPL人体参数化三维模型对应的预设二维网格顶点投影图的网格顶点的拓扑关系,创建拉普拉斯坐标网格模型矩阵;
将所述人物轮廓图的像素点的三维位置坐标输入至所述拉普拉斯坐标网格模型矩阵;
使用带位置约束的优化模型,对所述拉普拉斯坐标网络模型矩阵求解,以得到所述人物图像的其他像素点的三维位置坐标。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳普罗米修斯视觉技术有限公司,未经深圳普罗米修斯视觉技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010177642.4/1.html,转载请声明来源钻瓜专利网。