[发明专利]视频集合的索引方法、装置和存储介质及电子设备有效
申请号: | 202111336533.3 | 申请日: | 2021-11-12 |
公开(公告)号: | CN113779303B | 公开(公告)日: | 2022-02-25 |
发明(设计)人: | 余自强 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/71 | 分类号: | G06F16/71;G06F16/738;G06F16/783;G06N3/04;G06N3/08 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 周婷婷 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 集合 索引 方法 装置 存储 介质 电子设备 | ||
1.一种视频集合的索引方法,其特征在于,包括:
从目标视频片段中获取包含索引信息的视频关键帧,其中,所述索引信息为对视频进行索引时作为索引依据的参考信息,所述索引信息至少包括类型信息,所述类型信息用于识别所述目标视频片段的视频帧所属的视频类型;
提取所述视频关键帧的图像特征和索引特征,其中,所述图像特征为用于表示所述视频关键帧的图像内容的特征,所述索引特征为用于表示所述索引信息在所述视频关键帧中的特征;
基于所述图像特征以及所述索引特征,获取所述目标视频片段匹配的目标视频集合,其中,所述目标视频集合中包括一个或者多个视频,所述目标视频集合中包括所述目标视频片段匹配的目标视频;所述目标视频片段为一个完整视频的部分视频片段,所述目标视频为所述目标视频集合中的完整视频,所述索引特征用于缩小所述目标视频集合的索引范围,所述图像特征用于在已缩小索引范围的候选视频中确定出符合索引要求的所述目标视频;
所述基于所述图像特征以及所述索引特征,获取所述目标视频片段匹配的目标视频集合,包括:在向量检索的数据规模小于目标阈值的情况下,将索引检索库分割成多个子空间;将基于所述图像特征以及所述索引特征得到的查询向量和所述多个子空间中的每个子空间内的所有视频帧向量按欧式距离或余弦距离分别进行相似度计算,得到目标视频帧向量,其中,所述目标视频帧向量为所述目标视频的视频帧向量;
所述基于所述图像特征以及所述索引特征,获取所述目标视频片段匹配的目标视频集合,还包括:提取所述视频关键帧在不同层级的图像特征,并将所述不同层级的图像特征进行聚合,得到聚合后的图像特征,其中,所述聚合后的图像特征用于保留所述视频关键帧的图像内容的特征和空间信息;
按照所述目标视频片段的播放进度播放所述目标视频。
2.根据权利要求1所述的方法,其特征在于,所述基于所述图像特征以及所述索引特征,获取所述目标视频片段匹配的目标视频集合,包括:
基于所述索引特征,从索引视频库中获取至少一个候选视频,其中,所述索引视频库中包括多个待索引的视频;
基于所述图像特征,从所述至少一个候选视频中获取所述目标视频,其中,所述目标视频对应的图像内容的特征与所述图像特征之间的特征相似度达到第一阈值,所述目标视频集合包括所述目标视频;
获取所述目标视频所在的所述目标视频集合。
3.根据权利要求1所述的方法,其特征在于,所述基于所述图像特征以及所述索引特征,获取所述目标视频片段匹配的目标视频集合,包括:
对所述图像特征以及所述索引特征进行拼接处理,得到目标索引特征;
基于所述目标索引特征从索引视频库中获取所述目标视频,其中,所述索引视频库中包括多个待索引的视频,所述目标视频对应的目标特征与所述目标索引特征之间的特征相似度达到第二阈值;
获取所述目标视频所在的所述目标视频集合。
4.根据权利要求1所述的方法,其特征在于,所述从目标视频片段中获取包含索引信息的视频关键帧,包括:
获取所述目标视频片段对应的N个视频帧,其中,N为自然数;
基于所述N个视频帧中相邻的每个视频帧之间的差异信息,对所述N个视频帧进行分割处理,得到M个视频子片段,其中,M为自然数;
对所述M个视频子片段中的每个视频子片段进行索引信息识别,获取P个所述视频关键帧,其中,P为小于等于M的自然数。
5.根据权利要求4所述的方法,其特征在于,所述对所述M个视频子片段中的每个视频子片段进行索引信息识别,获取P个所述视频关键帧,包括:
对所述M个视频子片段中的每个视频子片段进行索引信息识别,确定所述每个视频子片段中包含所述索引信息的视频帧;
在一个所述视频子片段包含至少两个包含所述索引信息的视频帧的情况下,按照包含的所述索引信息的优先级、从所述至少两个包含所述索引信息的视频帧中确定所述视频关键帧。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111336533.3/1.html,转载请声明来源钻瓜专利网。