[发明专利]动作迁移方法、装置和电子设备在审
申请号: | 202011468573.9 | 申请日: | 2020-12-11 |
公开(公告)号: | CN112508776A | 公开(公告)日: | 2021-03-16 |
发明(设计)人: | 唐吉霖;袁燚;胡志鹏 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 钟扬飞 |
地址: | 310052 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 迁移 方法 装置 电子设备 | ||
1.一种动作迁移方法,其特征在于,所述方法包括:
获取在源动作下以及目标动作下,目标对象中指定位置点的位置信息;其中,所述目标对象被划分为多个部位;
基于所述部位包含的指定位置点的位置信息,确定从所述源动作变换至所述目标动作时,所述部位的偏移信息;基于所述偏移信息以及所述部位的源图像特征,确定所述部位的目标图像特征;
通过每个所述部位的目标图像特征,得到所述目标动作下的目标对象。
2.根据权利要求1所述的方法,其特征在于,基于所述偏移信息以及所述部位的源图像特征,确定所述部位的目标图像特征的步骤,包括:
基于所述偏移信息对所述部位的源图像特征进行形变操作,得到所述部位的中间图像特征;
基于所述部位的特征可见性信息,对所述中间图像特征进行筛选处理,得到所述部位的目标图像特征;其中,所述特征可见性信息用于指示:所述部位中每个位置点的目标图像特征存在于所述源图像特征的概率;所述部位由多个位置点组成,所述部位包含的指定位置点属于所述多个位置点。
3.根据权利要求2所述的方法,其特征在于,基于所述部位的特征可见性信息,对所述中间图像特征进行筛选处理,得到所述部位的目标图像特征的步骤,包括:
通过所述目标动作下所述部位所包含的指定位置点的位置信息,得到所述目标动作下所述部位的部位动作特征;
基于所述部位的特征可见性信息,对所述部位动作特征和所述中间图像特征进行加权求和处理,得到所述目标图像特征。
4.根据权利要求3所述的方法,其特征在于,基于所述部位的特征可见性信息,对所述部位动作特征和所述中间图像特征进行加权求和处理,得到所述目标图像特征的步骤,包括:
通过下述算式,计算得到所述目标图像特征:
其中,表示所述目标图像特征;Vlocal表示所述部位的特征可见性信息;表示所述中间图像特征;表示所述部位动作特征。
5.根据权利要求1所述的方法,其特征在于,基于所述部位包含的指定位置点的位置信息,确定从所述源动作变换至所述目标动作时,所述部位的偏移信息的步骤,包括:
针对每个部位,将源动作下以及目标动作下,所述部位包含的指定位置点的位置信息输入至外观流生成网络中,输出所述部位的偏移信息,以及所述部位的特征可见性信息。
6.根据权利要求1所述的方法,其特征在于,通过每个所述部位的目标图像特征,得到所述目标动作下的目标对象的步骤之前,所述方法还包括:
将所述部位的目标图像特征输入至扩张卷积网络中,输出所述部位最终的目标图像特征;其中,所述扩张卷积网络包括至少一层级联连接的扩张卷积层;每层所述扩张卷积层设置有预设的扩张率参数。
7.根据权利要求1所述的方法,其特征在于,通过每个所述部位的目标图像特征,得到所述目标动作下的目标对象的步骤,包括:
通过所述目标动作下所述目标对象中指定位置点的位置信息,得到所述目标动作下所述目标对象的对象动作特征;
基于所述目标对象的对象动作特征,以及每个所述部位的目标图像特征,得到所述目标动作下的目标对象。
8.根据权利要求7所述的方法,其特征在于,基于所述目标对象的对象动作特征,以及每个所述部位的目标图像特征,得到所述目标动作下的目标对象的步骤,包括:
将所述目标对象的对象动作特征和每个所述部位的目标图像特征进行拼接处理,得到拼接特征;
将所述拼接特征输入至特征融合网络中,输出初始融合特征;基于所述初始融合特征,确定所述目标动作下的目标对象。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011468573.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种多功能贴屏式旋钮
- 下一篇:一种电力自动控制装置