[发明专利]一种3D虚拟形象的生成方法、装置、电子设备及存储介质在审
申请号: | 202010324047.9 | 申请日: | 2020-04-22 |
公开(公告)号: | CN111681302A | 公开(公告)日: | 2020-09-18 |
发明(设计)人: | 王银辉 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06K9/00;G06N3/04;G06N3/08;G06N20/00 |
代理公司: | 北京华夏泰和知识产权代理有限公司 11662 | 代理人: | 卢万腾;李雪 |
地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 虚拟 形象 生成 方法 装置 电子设备 存储 介质 | ||
1.一种3D虚拟形象的生成方法,其特征在于,包括:
采集2D视频的视频帧中2D形象的第一2D骨骼位置信息;
获取所述第一2D骨骼位置信息相对于第一3D骨骼位置信息的映射矩阵,所述映射矩阵根据初始2D骨架及初始3D骨架生成;
根据所述映射矩阵将所述第一2D骨骼位置信息转换为第一3D骨骼位置信息;
根据所述第一3D骨骼位置信息及所述初始3D骨架的第二3D骨骼位置信息计算骨骼变化信息;
根据所述第一3D骨骼位置信息及所述骨骼变化信息确定3D骨骼数据;
根据所述3D骨骼数据及所述初始3D骨架确定所述2D形象对应的3D虚拟形象。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
构建所述初始2D骨架对应的第一2D骨骼包围盒及所述初始3D骨架对应的3D骨骼包围盒;
根据所述第一2D骨骼包围盒和3D骨骼包围盒计算所述映射矩阵。
3.根据权利要求2所述的方法,其特征在于,所述根据所述第一2D骨骼包围盒和3D骨骼包围盒计算所述映射矩阵,包括:
将所述3D骨骼包围盒的深度坐标值设置为相同,得到第二2D骨骼包围盒;
获取所述第一2D骨骼包围盒上预设个数的第一预设位置点,及所述第二2D骨骼包围盒上所述预设个数的第二预设位置点,所述第一预设位置点在所述第一2D骨骼包围盒上的位置与所述第二预设位置点在所述第二2D骨骼包围盒上的位置相同;
根据所述第一预设位置点和第二预设位置点的坐标计算所述映射矩阵。
4.根据权利要求2所述的方法,其特征在于,在所述构建所述初始2D骨架对应的第一2D骨骼包围盒及所述初始3D骨架对应的3D骨骼包围盒之前,所述方法还包括:
识别所述视频帧中的2D形象;
当确定所述2D形象处于预设状态时,创建所述初始2D骨架和所述初始3D骨架。
5.根据权利要求1所述的方法,其特征在于,根据所述映射矩阵将所述第一2D骨骼位置信息转换为所述第一3D骨骼位置信息,包括:
从根骨骼遍历所述2D形象的2D骨架;
将所述2D骨架中骨骼的第一2D骨骼位置信息乘以所述映射矩阵,得到所述骨骼对应的所述第一3D骨骼位置信息。
6.根据权利要求5所述的方法,其特征在于,所述根据所述初始3D骨架的第二3D骨骼位置信息及所述第一3D骨骼位置信息计算每个骨骼的骨骼变化信息,包括:
获取初始3D骨架中的第二3D骨骼位置信息;
根据所述第二3D骨骼位置信息及所述第一3D骨骼位置信息计算所述骨骼的缩放量和旋转量;
根据所述缩放量和旋转量得到所述骨骼变化信息。
7.根据权利要求6所述的方法,其特征在于,所述根据所述第二3D骨骼位置信息及所述第一3D骨骼位置信息计算所述骨骼的缩放量,包括:
根据所述第一3D骨骼位置信息确定子骨骼与其父骨骼之间的第一长度,根据所述第二3D骨骼位置信息确定所述子骨骼与其父骨骼之间的第二长度;
根据所述第一长度与所述第二长度的比值确定所述缩放量。
8.根据权利要求6所述的方法,其特征在于,所述根据所述第二3D骨骼位置信息及所述第一3D骨骼位置信息计算每个骨骼的旋转量,包括:
根据所述第一3D骨骼位置信息确定子骨骼与其父骨骼的第一向量,根据所述第二3D骨骼位置信息确定所述子骨骼与其父骨骼的第二向量;
确定所述第一向量和所述第二向量的向量积及夹角;
根据所述向量积及所述夹角计算所述旋转量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010324047.9/1.html,转载请声明来源钻瓜专利网。