[发明专利]视频摘要生成方法、装置、存储介质和电子设备有效
申请号: | 201811229502.6 | 申请日: | 2018-10-22 |
公开(公告)号: | CN109348287B | 公开(公告)日: | 2022-01-28 |
发明(设计)人: | 冯俐铜;旷章辉;张伟 | 申请(专利权)人: | 深圳市商汤科技有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/84;H04N21/8549;G06F16/71;G06F16/73;G06F16/75 |
代理公司: | 北京之于行知识产权代理有限公司 11767 | 代理人: | 韩岳 |
地址: | 518054 广东省深圳市南*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 摘要 生成 方法 装置 存储 介质 电子设备 | ||
1.一种视频摘要生成方法,其特征在于,包括:
获取视频序列中的多个第一关键帧;
基于第一风格的摘要字典,从所述多个第一关键帧中确定所述第一风格对应的至少一个有效关键帧,所述第一风格的摘要字典包括所述第一风格对应的聚类特征数据,所述聚类特征数据包括至少一个聚类特征,其中,所述聚类特征是基于与所述第一风格对应的聚类簇中包括的多个样本图像的特征数据得到的;
基于所述第一风格对应的至少一个有效关键帧,生成所述第一风格的视频摘要。
2.根据权利要求1所述的方法,其特征在于,所述获取视频序列中的多个第一关键帧,包括:
对所述视频序列进行镜头分割处理,获得多个第一镜头,每个第一镜头包括所述视频序列中的多个图像帧;
对所述多个第一镜头进行关键帧提取处理,获得多个第一关键帧。
3.根据权利要求1所述的方法,其特征在于,所述基于第一风格的摘要字典,从所述多个第一关键帧中确定所述第一风格对应的至少一个有效关键帧,包括:
获取所述多个第一关键帧中每个第一关键帧的特征数据;
根据所述多个第一关键帧中每个第一关键帧的特征数据和所述第一风格的摘要字典,从所述多个第一关键帧中确定所述第一风格对应的至少一个有效关键帧。
4.根据权利要求3所述的方法,其特征在于,所述根据所述多个第一关键帧中每个第一关键帧的特征数据和第一风格的摘要字典,从所述多个第一关键帧中获取所述第一风格对应的至少一个有效关键帧,包括:
基于所述多个第一关键帧中每个第一关键帧的特征数据,确定所述每个第一关键帧是否与所述第一风格的摘要字典匹配;
将所述多个第一关键帧中与所述第一风格的摘要字典匹配的第一关键帧确定为所述第一风格对应的有效关键帧。
5.根据权利要求4所述的方法,其特征在于,所述基于所述多个第一关键帧中每个第一关键帧的特征数据,确定所述每个第一关键帧是否与所述第一风格的摘要字典匹配,包括:
响应于所述第一关键帧的特征数据与所述第一风格的摘要字典包含的至少一个聚类特征之间的最小距离小于或等于预设距离阈值,将所述第一关键帧确定为所述第一风格对应的有效关键帧;或者
响应于所述第一风格的摘要字典包含的至少一个聚类特征中存在与所述第一关键帧的特征数据匹配的聚类特征,将所述第一关键帧确定为所述第一风格对应的有效关键帧。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述方法还包括:
基于第二风格的摘要字典,从所述多个第一关键帧中确定所述第二风格对应的至少一个有效关键帧,其中,所述第二风格的摘要字典不同于所述第一风格的摘要字典;
基于所述第二风格对应的至少一个有效关键帧,生成所述第二风格的视频摘要。
7.根据权利要求1至5中任一项所述的方法,其特征在于,所述基于所述第一风格对应的至少一个有效关键帧,生成所述第一风格的视频摘要,包括:
根据时序信息将所述第一风格对应的至少一个有效关键帧按序排列,得到所述第一风格的视频摘要。
8.根据权利要求1至5中任一项所述的方法,其特征在于,在所述基于第一风格的摘要字典,从所述多个第一关键帧中确定所述第一风格对应的至少一个有效关键帧之前,所述方法还包括:
获取视频序列样本中的多个样本图像;
对所述多个样本图像进行聚类处理,得到所述第一风格对应的至少一个聚类簇;
基于所述第一风格对应的至少一个聚类簇,得到所述第一风格的摘要字典。
9.根据权利要求8所述的方法,其特征在于,所述多个样本图像为多个第二关键帧;
所述获取视频序列样本中的多个样本图像,包括:
对所述视频序列样本进行镜头分割处理,获得多个第二镜头;
对所述多个第二镜头进行关键帧提取,获得多个第二关键帧。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市商汤科技有限公司,未经深圳市商汤科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811229502.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:频道切换方法及装置
- 下一篇:一种视频的处理方法、装置、存储介质及终端