[发明专利]一种视频剪辑方法、视频聚合方法、装置以及系统在审
申请号: | 201811505962.7 | 申请日: | 2018-12-10 |
公开(公告)号: | CN109684511A | 公开(公告)日: | 2019-04-26 |
发明(设计)人: | 赵之健;林亦宁;包怡欣 | 申请(专利权)人: | 上海七牛信息技术有限公司 |
主分类号: | G06F16/75 | 分类号: | G06F16/75;G06F16/783;G06K9/00;G06K9/32;G06K9/62 |
代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 郭桂峰 |
地址: | 201203 上海市浦东新区中国(上海)自*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频剪辑 视频事件 视频 时间对齐 视频文本 预设 聚合 技术结合 视频分类 文本分类 剪辑 通用 分析 学习 | ||
1.一种视频剪辑方法,其特征在于,所述方法包括:
分析视频文本信息,得到视频事件对应时间范围;
在所述时间范围内,通过第一预设处理条件,将视频文本信息中的时间与所述视频事件中的时间对齐;
将时间对齐的视频事件通过第二预设处理条件进行处理,得到视频事件对应的编辑视频。
2.如权利要求1所述的方法,其特征在于,分析视频文本信息,得到视频事件对应时间范围,包括:
对已进行标记的带时间信息的视频文本信息进行转换处理,得到所述视频文本信息对应的特征向量;
通过textcnn模型、lstm with attetion模型以及VDCNN模型,对所述特征向量进行特征提取,得到三种类型的特征数据;
将三种类型的特征数据首尾相接输入到分类器,得到分类标签;
根据分类标签中的时间信息,得到视频事件对应的时间范围。
3.如权利要求1所述的方法,其特征在于,通过第一预设处理条件,将视频文本信息中的时间与所述视频事件中的时间对齐,包括:
在直播视频的图片中确定出感兴趣区域ROI,提取图片中的特征,并通过自底向上的卷积得到N个尺度的特征图,其中,N为大于等于1的正整数;
通过回归处理,得到所述特征图对应的视频文字区域;
将所述视频文字区域输入到端到端文字识别CRNN的识别网络中,得到所述视频文字区域对应的时间的信息结果。
4.如权利要求1所述的方法,其特征在于,将时间对齐的视频事件通过第二预设处理条件进行处理,得到视频事件对应编辑视频,包括:
将直播视频分解为三部分;
通过所述第二预设处理条件,分别对分解出的三部分进行处理,得到结果融合输出;
将结果融合输出作为对应的编辑视频。
5.一种视频聚合方法,其特征在于,所述方法包括:
在获取到一视频文件时,在所述视频文件中提取出具有预设特征的子视频文件,所述提取方法应用权利要求1-4中任一权项所述的视频剪辑方法;
将提取出的所有子视频文件进行视频聚合处理,得到聚合视频文件。
6.一种视频剪辑系统,其特征在于,所述系统包括
分析模块,用于分析视频文本信息,得到视频事件对应时间范围;
处理模块,用于在所述时间范围内,通过第一预设处理条件,将视频文本信息中的时间与所述视频事件中的时间对齐;将时间对齐的视频事件通过第二预设处理条件进行处理,得到视频事件对应编辑视频。
7.如权利要求6所述的系统,其特征在于,所述分析模块,具体用于对已进行标记的带时间信息的视频文本信息进行转换处理,得到所述视频文本信息对应的特征向量;通过textcnn模型、lstm with attetion模型以及VDCNN模型,对所述特征向量进行特征提取,得到三种类型的特征数据;将三种类型的特征数据首尾相接输入到分类器,得到分类标签;根据分类标签中的时间信息,得到视频事件对应的时间范围。
8.如权利要求6所述的系统,其特征在于,所述处理模块,具体用于在直播视频的图片中确定出感兴趣区域ROI,提取图片中的特征,并通过自底向上的卷积得到N个尺度的特征图,其中,N为大于等于1的正整数;通过回归处理,得到所述特征图对应的视频文字区域;将所述视频文字区域输入到端到端文字识别CRNN的识别网络中,得到所述视频文字区域对应的时间的信息结果。
9.如权利要求6所述的系统,其特征在于,所述处理模块,具体用于将直播视频分解为三部分;通过所述第二预设处理条件,分别对分解出的三部分进行处理,得到结果融合输出;将结果融合输出作为对应的编辑视频。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海七牛信息技术有限公司,未经上海七牛信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811505962.7/1.html,转载请声明来源钻瓜专利网。