[发明专利]一种视频合成方法及装置有效
申请号: | 201910283670.1 | 申请日: | 2019-04-09 |
公开(公告)号: | CN111800663B | 公开(公告)日: | 2023-09-05 |
发明(设计)人: | 邹娟 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/4402;G06V40/16 |
代理公司: | 北京清源汇知识产权代理事务所(特殊普通合伙) 11644 | 代理人: | 冯德魁;窦晓慧 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 合成 方法 装置 | ||
1.一种视频合成方法,其特征在于,包括:
根据原始视频材料,获得包含目标人物的人物轨道数据,包括:针对所述原始视频材料中的人物进行人脸识别,获得人脸出现的时间数据、人脸占据视频画面的区域数据以及人物元数据;根据所述时间数据、所述人脸占据视频画面的区域数据以及所述人物元数据,获得包含目标人物的人物轨道数据,其中,所述人物轨道基于视频轨道抽象获得,所述人物轨道数据是以人物为核心线索组织的具有时间顺序的素材;
根据对目标人物的视觉要求,针对所述人物轨道数据中的原始时间线进行优化处理,获得优化后的目标人物素材的时间线,包括:针对目标人物素材的特效渲染进行回归处理,获得优化后的目标人物素材的时间线,其中,所述针对目标人物素材的特效渲染进行回归处理,包括:针对目标人物素材的缩放特效渲染、移动特效渲染、和/或淡入淡出特效渲染进行回归处理;
根据所述优化后的目标人物素材的时间线,合成相关素材,获得目标视频。
2.根据权利要求1所述的视频合成方法,其特征在于,所述针对所述人物轨道数据中的原始时间线进行优化处理,获得优化后的目标人物素材的时间线,包括:
获取所述目标视频的视频合成规则;
根据所述视频合成规则,将所述原始时间线进行分轨处理,获得优化后的目标人物素材的时间线。
3.根据权利要求2所述的视频合成方法,其特征在于,所述目标视频的视频合成规则包括如下规则中的至少一种:
按照人物的不同进行视频合成;
按照景别的不同进行视频合成;
按照拍摄方式的不同进行视频合成。
4.根据权利要求2所述的视频合成方法,其特征在于,所述根据所述视频合成规则,将所述原始时间线进行分轨处理,包括:
根据所述合成规则,获得所述原始时间线的轨道;
其中,所述原始时间线的每个轨道,分别对应所述合成规则的一种情况。
5.根据权利要求1所述的视频合成方法,其特征在于,所述针对目标人物素材的缩放特效渲染进行回归处理,包括:
在对目标人物素材进行放大或缩小过程中,判断所述目标人物素材对应的人脸区域是否超过输出视频的边界;
若是,则根据缩放时长与人脸在画面中的区域调整缩放的起止倍数。
6.根据权利要求1所述的视频合成方法,其特征在于,所述针对目标人物素材的缩放特效渲染进行回归处理,包括:
根据目标人物素材中人物在画面中的占比和所述人物的数量,调整放大或缩小的缩放中心点位置。
7.根据权利要求1所述的视频合成方法,其特征在于,所述针对目标人物素材的移动特效渲染进行回归处理,包括:
在针对所述目标人物素材进行移动特效渲染时,判断在移动过程中,所述目标人物素材对应的人脸区域是否超过输出视频的边界;
若是,则根据移动时长与人脸在画面中的区域调整人物移动的起止位置、移动方向和/或移动路线。
8.根据权利要求1所述的视频合成方法,其特征在于,所述针对目标人物素材的淡入淡出特效渲染进行回归处理,包括:
在对目标人物素材进行淡入淡出特效渲染时,获取渐变过程中目标人物素材对应的人脸区间的位置;
根据所述人脸区间的位置,确定人脸区域的保留时间。
9.根据权利要求1所述的视频合成方法,其特征在于,所述针对所述人物轨道数据中的原始时间线进行优化处理,获得优化后的目标人物素材的时间线,包括:
获取进行视频合成时目标人物素材对应的辅助轨道素材;
调整所述辅助轨道素材的时间线以及所述辅助轨道素材对应的画面位置,以避免所述辅助轨道素材遮挡目标人物素材。
10.根据权利要求9所述的视频合成方法,其特征在于,所述辅助轨道素材包括如下素材中的至少一种:
贴纸;
动画;
横幅文字;
字幕。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910283670.1/1.html,转载请声明来源钻瓜专利网。