[发明专利]基于深度学习框架的数字人面部表情动画自动迁移方法有效
申请号: | 202011413230.2 | 申请日: | 2020-12-07 |
公开(公告)号: | CN112200894B | 公开(公告)日: | 2021-03-09 |
发明(设计)人: | 赵锐;侯志迎 | 申请(专利权)人: | 江苏原力数字科技股份有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06N3/04;G06N3/08 |
代理公司: | 南京常青藤知识产权代理有限公司 32286 | 代理人: | 高远 |
地址: | 210000 江苏省南京市建邺*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 深度 学习 框架 数字 人面 表情 动画 自动 迁移 方法 | ||
1.基于深度学习框架的数字人面部表情动画自动迁移方法,其特征在于,包括以下步骤:
S1:训练数据生成,做出多帧两个不同的数字人的相同表情模型,提取出所述表情模型对应的动画控制器通道的参数值,生成一个动画控制器参数维度的向量;
所述S1中提取过程包括以下步骤:在每个关键帧,提取出模型上动画控制器通道属性值, 写入一个文本文件,文本文件每一行代表一帧,每一列代表一个控制器通道,数值记录控制器通道属性值;
S2:神经网络搭建模型,建立四层神经网络,输入输出为控制器参数向量,中间两层隐含层,各有多个神经元;
S3:训练网络模型,建立不同的数字人相同表情下控制器参数值之间的联系,一个数字人的控制器参数值作为输入,另一个数字人的控制器参数值作为标签,建立回归任务,代价函数采用均方误差,保存训练过程中损失值最低的模型参数;
S4:运用训练好的模型进行表情迁移,一个数字人的控制器参数值输入网络模型,得到另一个数字人相同表情对应的控制器参数值,将生成的控制器参数值应用到该数字人模型中,从而驱动该数字人模型上的网络3D空间顶点位置。
2.根据权利要求1所述的基于深度学习框架的数字人面部表情动画自动迁移方法,其特征在于,所述S1中挑选出关键帧提取出所述表情模型对应的动画控制器通道的参数值,所述关键帧为具有代表性的表情。
3.根据权利要求1所述的基于深度学习框架的数字人面部表情动画自动迁移方法,其特征在于,所述S2中的隐含层,各有500个神经元。
4.根据权利要求1所述的基于深度学习框架的数字人面部表情动画自动迁移方法,其特征在于,所述S4中网络模型经过训练以后,作为工具实时使用在Maya软件中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏原力数字科技股份有限公司,未经江苏原力数字科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011413230.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于计算机控制的船锚
- 下一篇:一种基于深度学习的数字人布料实时解算方法