[发明专利]一种基于模板抽取多媒体素材生成视频的方法及系统在审
申请号: | 201910795532.1 | 申请日: | 2019-08-27 |
公开(公告)号: | CN110532426A | 公开(公告)日: | 2019-12-03 |
发明(设计)人: | 陈凌云;滕思敏 | 申请(专利权)人: | 新华智云科技有限公司 |
主分类号: | G06F16/71 | 分类号: | G06F16/71;G06F16/74;G06F16/75 |
代理公司: | 33289 杭州裕阳联合专利代理有限公司 | 代理人: | 姚宇吉<国际申请>=<国际公布>=<进入 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 多媒体素材 模板配置 抽取 视频生成 标签 预设 视频 预处理 操作流程 聚类规则 模板建立 视频模板 视频素材 用户需要 用户寻找 用户重复 输出 标签化 数据集 聚类 筛选 | ||
1.一种基于模板抽取多媒体素材生成视频的方法,其特征在于,包括以下步骤:
获取多媒体素材,预处理所述多媒体素材后进行标签化处理,输出各多媒体素材的标签,并按照预设的聚类规则将所述多媒体素材及其相对应的标签进行聚类,获得若干个数据集;
获取用户输入的模板配置数据,根据所述模板配置数据和预设的初始模板建立视频模板,所述模板配置数据包括任务触发规则、素材抽取规则和模板样式数据,所述素材抽取规则用于指定数据集,还用于指定标签;
根据任务触发规则判断是否开始进行视频生成任务,当判定开始进行视频生成任务时,根据素材抽取规则从所指定的数据集中抽取与所指定的标签相对应多媒体素材,将所抽取的多媒体素材按照所述模板样式数据生成视频并输出。
2.根据权利要求1所述的一种基于模板抽取多媒体素材生成视频的方法,其特征在于,所述任务触发规则包括手动触发、事件触发和/或定时触发;
所述手动触发是获取用户输入的模板选择信息,根据模板选择信息进行匹配,匹配成功时触发相应视频模板进行视频生成任务;
所述事件触发是设置触发词和触发词来源,根据触发词来源将各多媒体素材的标签与触发词相匹配,当匹配成功时触发相应视频模板进行视频生成任务;
所述定时触发是设置触发时间,根据触发时间定时触发相应视频模板进行视频生成任务。
3.根据权利要求1所述的一种基于模板抽取多媒体素材生成视频的方法,其特征在于:
所述模板配置数据还包括素材排序规则,所述素材排序规则是将所抽取的多媒体素材根据时间和/或标签进行排序。
4.根据权利要求1所述的一种基于模板抽取多媒体素材生成视频的方法,其特征在于,根据素材抽取规则从所指定的数据集中抽取与所指定的标签相对应多媒体素材的具体步骤为:
所述素材抽取规则还用于指定类型、指定来源、指定时长和指定数量;
根据指定类型、指定来源、指定时长对所指定的数据集中所有多媒体素材进行筛选,再从筛选通过的素材中按照指定的标签抽取指定数量的多媒体素材。
5.根据权利要求1所述的一种基于模板抽取多媒体素材生成视频的方法,其特征在于,根据所抽取的多媒体素材和所述模板样式数据生成视频并输出后还包括效果调整步骤,具体步骤为:
获取用户输入的调整信息,根据调整信息对任务触发规则、素材抽取规则和/或模板样式数据进行相应调整,更新并保存调整后的视频模板,所述模板样式数据包括字幕样式数据、配乐样式数据、片头样式数据、片尾样式数据、转场样式数据、贴图样式数据、滤镜样式数据、台标样式数据和水印样式数据;
根据调整后的视频模板重新进行视频生成任务,生成调整后的视频并输出。
6.根据权利要求1至5任一所述的一种基于模板抽取多媒体素材生成视频的方法,其特征在于,获取多媒体素材,预处理所述多媒体素材后进行标签化处理,输出各多媒体素材的标签,并按照预设的聚类规则将所述多媒体素材及其相对应的标签进行聚类,获得若干个数据集的具体步骤为:
获取多媒体素材,所述多媒体素材包括视频素材、音频素材、文本素材和图像素材,将所述多媒体素材分解为文本数据、音频数据和/或图像数据;
标签化处理所述文本数据,输出与文本数据相对应的实体标签、文本标签、分类标签和/或触发标签;
标签化处理所述音频数据,输出与所述音频数据相对应的声音标签;
标签化处理所述图像数据,输出与所述图像数据相对应的人脸标签、物体标签和/或场景标签;
将所述多媒体素材、分解获得的文本数据及其相对应的标签、分解获得的音频数据及其相对应的标签、分解获得的图像数据及其相对应的标签按照预设的聚类规则进行聚类,获得若干个数据集。
7.根据权利要求6所述的一种基于模板抽取多媒体素材生成视频的方法,其特征在于,根据素材抽取规则从所指定的数据集中抽取与所指定的标签相对应多媒体素材后,还包括抽取字幕步骤,具体步骤为:
模板配置数据包括字幕抽取规则,所述字幕抽取规则是所抽取的多媒体素材与文本数据之间的映射关系,根据所述映射关系抽取与所抽取的多媒体素材相对应的文本数据作为字幕。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新华智云科技有限公司,未经新华智云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910795532.1/1.html,转载请声明来源钻瓜专利网。