[发明专利]虚拟角色的生成方法、装置、电子设备及存储介质有效
申请号: | 202010494281.6 | 申请日: | 2020-06-03 |
公开(公告)号: | CN111638791B | 公开(公告)日: | 2021-11-09 |
发明(设计)人: | 王光伟 | 申请(专利权)人: | 北京火山引擎科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06K9/00;G06K9/62 |
代理公司: | 上海光栅知识产权代理有限公司 31340 | 代理人: | 马雯雯;乔慧 |
地址: | 100190 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 角色 生成 方法 装置 电子设备 存储 介质 | ||
1.一种虚拟角色的生成方法,其特征在于,包括:
获取当前图像帧中的人物关节点信息;
利用预设的运动状态识别模型,对所述人物关节点信息进行处理,以得到人物在当前图像帧中的人物姿态,并确定当前图像帧中的人物的各关节的运动状态;
根据当前图像帧中的人物的各关节的运动状态,生成虚拟角色;其中,所述各关节的运动状态包括关节位置和旋转状态;
其中,所述利用预设的运动状态识别模型,对所述人物关节点信息进行处理,以得到人物在当前图像帧中的人物姿态,并确定人物的各关节的运动状态,包括:
对所述人物关节点信息进行特征提取处理,获得所述人物姿态的隐变量特征;对所述人物姿态的隐变量特征进行还原处理,得到人物的各关节的关节位置和旋转状态;
所述虚拟角色的生成方法,还包括:利用预设的运动状态识别模型,对前一图像帧中的人物关节点信息进行处理,获得前一图像帧中的人物姿态的隐变量特征;
相应的,所述对所述人物姿态的隐变量特征进行还原处理,得到人物的各关节的关节位置和旋转状态,包括:
对所述前一图像帧中的人物姿态的隐变量特征以及当前图像帧中的人物姿态的隐变量特征进行还原处理,得到人物的各关节在前一图像帧中的关节位置和旋转状态,以及各关节在当前图像帧中的关节位置和旋转状态;
相应的,所述根据当前图像帧中的人物的各关节的运动状态,生成虚拟角色,包括:
根据人物的各关节在前一图像帧和当前图像帧中的关节位置和旋转状态,生成虚拟角色。
2.根据权利要求1所述的虚拟角色的生成方法,其特征在于,所述根据人物的各关节在前一图像帧和当前图像帧中的关节位置和旋转状态,生成虚拟角色,包括:
根据人物的各关节在前一图像帧和当前图像帧中的关节位置和旋转状态,获得各关节的运动轨迹;
按照各关节的运动轨迹,在前一图像帧的虚拟角色的各关节的运动状态的基础上,对虚拟角色的各关节进行轨迹模拟,生成当前图像帧的虚拟角色。
3.根据权利要求1所述的虚拟角色的生成方法,其特征在于,所述根据当前图像帧中的人物的各关节的运动状态,生成虚拟角色,还包括:
利用运动状态识别模型对当前图像帧中的人物的各关节的运动状态的真实性进行判定,并基于判定通过的当前图像帧中的人物的各关节的运动状态,生成虚拟角色。
4.根据权利要求1所述的虚拟角色的生成方法,其特征在于,还包括:
构建待训练的运动状态识别模型,并采集训练样本;其中,所述训练样本包括多个人物关节点样本信息,以及每个人物关节点样本信息对应的各关节的关节位置和旋转状态;
利用所述训练样本对所述待训练的运动状态识别模型进行训练,获得训练完毕的运动状态识别模型。
5.根据权利要求4所述的虚拟角色的生成方法,其特征在于,所述训练样本中还包括噪声样本信息,以及每个所述噪声样本信息对应的部分关节的关节位置和旋转状态。
6.根据权利要求1-5任一项所述的虚拟角色的生成方法,其特征在于,所述获取当前图像帧中的人物关节点信息,包括:
在当前图像帧中进行人物识别,获得人物在当前图像帧中的图像位置;
对所述图像位置对应的图像进行关节点识别处理,获得人物关节点信息。
7.根据权利要求6所述的虚拟角色的生成方法,其特征在于,所述对所述图像位置对应的图像进行关节点识别处理,获得人物关节点信息,包括:
根据预设的关节识别模型,对所述图像位置对应的图像进行识别处理,获得各关节在当前图像帧中的关节位置,以及关节类型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京火山引擎科技有限公司,未经北京火山引擎科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010494281.6/1.html,转载请声明来源钻瓜专利网。