[发明专利]视频检索方法、装置、电子设备和存储介质有效
申请号: | 202010620349.0 | 申请日: | 2020-06-30 |
公开(公告)号: | CN111782874B | 公开(公告)日: | 2023-01-17 |
发明(设计)人: | 贾若然;谭昶;李梓赫;傅云翔 | 申请(专利权)人: | 科大讯飞股份有限公司 |
主分类号: | G06F16/735 | 分类号: | G06F16/735;G06F16/75 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 程琛 |
地址: | 230088 安徽省*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 检索 方法 装置 电子设备 存储 介质 | ||
本发明实施例提供一种视频检索方法、装置、电子设备和存储介质,其中该方法包括:确定待检索视频;对所述待检索视频中所有图像帧进行聚类,得到多个图像簇,从每一图像簇中分别选取每一图像簇的关键帧;基于每一关键帧,确定所述待检索视频的视频检索结果。本发明实施例提供的方法、装置、电子设备和存储介质,通过对待检索视频中所有图像帧进行聚类,得到多个图像簇,从每一图像簇中分别选取每一图像簇的关键帧,进而确定待检索视频的视频检索结果,避免了对待检索视频中所有的图像帧进行检索匹配占用大量计算资源,在减小数据计算量和算法复杂度、提高视频检索效率的同时,保证了视频检索的全面性和准确性。
技术领域
本发明涉及视频处理技术领域,尤其涉及一种视频检索方法、装置、电子设备和存储介质。
背景技术
随着移动互联网的发展和智能终端的普及,视频已经成为重要的信息传播媒介。针对视频的同源性检测,对于视频的版权保护具有重要意义。
然而,由于视频本身的数据量极大,实现视频的特征提取和特征匹配需要耗用极大的计算资源,目前针对视频同源性检测的检索方法大都受到计算量的困扰,检索效率极低。
发明内容
本发明实施例提供一种视频检索方法、装置、电子设备和存储介质,用以解决现有的视频检索方法受限于计算量,检索效率低下的问题。
第一方面,本发明实施例提供一种视频检索方法,包括:
确定待检索视频;
对所述待检索视频中所有图像帧进行聚类,得到多个图像簇,从每一图像簇中分别选取每一图像簇的关键帧;
基于每一关键帧,确定所述待检索视频的视频检索结果。
优选地,所述对所述待检索视频中所有图像帧进行聚类,得到多个图像簇,具体包括:
若所述待检索视频中当前图像帧的图像特征与任一图像簇的聚类中心特征之间的相似度大于等于预设相似度阈值,则将所述当前图像帧加入到最大相似度对应的图像簇中;
否则,创建新的图像簇,将所述当前图像帧加入到所述新的图像簇中;
将所述待检索视频中的下一图像帧更新为当前图像帧。
优选地,所述基于每一关键帧,确定所述待检索视频的视频检索结果,具体包括:
确定任一关键帧的描述特征;
基于所述任一关键帧的描述特征,在预设视频库中进行检索,得到所述任一关键帧的图像帧检索结果;
基于每一关键帧的图像帧检索结果,确定所述待检索视频的视频检索结果。
优选地,所述确定任一关键帧的描述特征,具体包括:
将任一关键帧输入至描述特征提取模型的图像特征提取层,得到所述图像特征提取层输出的图像特征;
将所述图像特征输入至所述描述特征提取模型的多个尺度下的区域特征提取层,分别得到每一尺度下的区域特征提取层输出的对应尺度下若干个采样区域的区域特征;
将每一尺度下每一采样区域的区域特征输入至所述描述特征提取模型的尺度融合层,得到所述尺度融合层输出的描述特征。
优选地,所述将所述图像特征输入至所述描述特征提取模型的多个尺度下的区域特征提取层,分别得到每一尺度下的区域特征提取层输出的对应尺度下若干个采样区域的区域特征,具体包括:
将所述图像特征输入至任一尺度下的区域特征提取层,由所述任一尺度下的区域特征提取层基于所述任一尺度下的区域大小对所述图像特征中每一通道的通道特征进行采样,得到所述任一尺度下的区域特征提取层输出的若干个采样区域在每一通道的通道区域特征,作为所述任一尺度下每一采样区域的区域特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于科大讯飞股份有限公司,未经科大讯飞股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010620349.0/2.html,转载请声明来源钻瓜专利网。