[发明专利]包含动态背景的动画生成方法、装置及电子设备有效
申请号: | 201910214896.6 | 申请日: | 2019-03-20 |
公开(公告)号: | CN110047119B | 公开(公告)日: | 2021-04-13 |
发明(设计)人: | 郭冠军 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G06T13/20 | 分类号: | G06T13/20;H04N21/2187;H04N21/431 |
代理公司: | 北京天达共和律师事务所 11798 | 代理人: | 关刚 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 包含 动态 背景 动画 生成 方法 装置 电子设备 | ||
1.一种包含动态背景的动画生成方法,其特征在于,包括:
获取与目标对象的特定区域、第一元素及第二元素相关的重构模型,所述特定区域属于所述目标对象的一部分,所述第一元素及第二元素位于所述特定区域内;
基于所述重构模型,确定与输入信息相关的特定区域的纹理特征、所述第一元素的动作以及所述第二元素的动作,所述特定区域的纹理特征、所述第一元素的动作以及所述第二元素的动作形成了与所述输入信息相关的第一动画,其中,所述输入信息包括文本或音频;
在生成所述第一动画的同时,从预先设置的多个动画中动态选择与所述第一动画匹配的动画作为所述第一动画的背景动画;
基于所述第一动画及所述背景动画,生成与所述输入信息相关的最终动画。
2.根据权利要求1所述的方法,其特征在于,获取与目标对象的特定区域、第一元素及第二元素相关的重构模型之前,所述方法还包括:
采集包含目标对象的多个图像,基于所述多个图像,训练与所述目标对象的特定区域、第一元素及第二元素相关的重构模型。
3.根据权利要求2所述的方法,其特征在于,所述训练与所述目标对象的特定区域、第一元素及第二元素相关的重构模型,包括:
对所述多个图像上的特定区域进行检测,得到目标区域;
对所述目标区域进行3D重建,得到3D区域对象;
获取所述3D区域对象的三维网格,所述三维网格包含预设坐标值;
基于不同三维网格坐标上的像素值,确定所述特定区域的纹理图。
4.根据权利要求2所述的方法,其特征在于,所述训练与所述目标对象的特定区域、第一元素及第二元素相关的重构模型,包括:
在所述多个图像上对所述第一元素进行特征点检测;
将检测得到的特征点划分为第一类型特征点和第二类型特征点,所述第一类型特征点用于形成第一闭合区域,所述第二类型特征点用于形成第二闭合区域;
在所述第一闭合区域内填充第一颜色,在所述第二闭合区域内填充第二颜色,所述第一颜色与所述第二颜色不同。
5.根据权利要求2所述的方法,其特征在于,所述训练与所述目标对象的特定区域、第一元素及第二元素相关的重构模型,包括:
在所述多个图像上对所述第二元素进行特征点检测;
基于检测到的所有特征点,形成第三闭合区域;
在所述第三闭合区域内填充第三颜色。
6.根据权利要求3所述的方法,其特征在于,所述基于所述重构模型,确定与输入信息相关的特定区域的纹理特征、所述第一元素的动作以及所述第二元素的动作,包括:
将所述目标对象的特定区域的轮廓进行预测,在预测的轮廓内填充所述重构模型确定的纹理图;
将所述输入信息解析后的得到运动参数匹配到所述第一元素及第二元素,形成所述第一元素及所述第二元素的动作。
7.根据权利要求1所述的方法,其特征在于,所述从预先设置的多个动画中动态选择与所述第一动画匹配的动画作为所述第一动画的背景动画,包括:
对输入信息的当前情景进行分析,从预先设置的多个动画中动态选择选择与当前情景匹配的动画作为背景动画。
8.根据权利要求1所述的方法,其特征在于,所述基于所述第一动画及所述背景动画,生成与所述输入信息相关的最终动画,包括:
判断所述背景动画是否有多个不同类型的动画拼接组成;
若是,则对不同类型的动画进行平滑处理。
9.根据权利要求1所述的方法,其特征在于:
所述特定区域为脸部区域,所述第一元素为眼睛,所述第二元素为嘴巴。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910214896.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:视频生成方法、装置、计算机设备及存储介质
- 下一篇:一种动画展示方法及装置