[发明专利]用于提取视频关键帧的方法、装置及控制器在审
申请号: | 202110983987.3 | 申请日: | 2021-08-25 |
公开(公告)号: | CN113794815A | 公开(公告)日: | 2021-12-14 |
发明(设计)人: | 向超前;黄跃峰;廖超;虢彦;张保华 | 申请(专利权)人: | 中科云谷科技有限公司;中联重科股份有限公司 |
主分类号: | H04N5/14 | 分类号: | H04N5/14;H04N21/234;H04N21/44 |
代理公司: | 北京润平知识产权代理有限公司 11283 | 代理人: | 肖冰滨;王晓晓 |
地址: | 201306 上海市浦东*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 提取 视频 关键 方法 装置 控制器 | ||
1.一种用于提取视频关键帧的方法,其特征在于,所述方法包括:
获取在时间上依次相邻的第一视频帧、第二视频帧和第三视频帧;
将所述第三视频帧确定为目标视频帧;
对所述第一视频帧和所述第二视频帧进行差值处理以得到第一相邻差值图;
对所述第二视频帧和所述目标视频帧进行差值处理以得到第二相邻差值图;
确定所述目标视频帧与所述第二视频帧的相似度;
根据所述第一相邻差值图和所述第二相邻差值图判断所述目标视频帧是否包含运动;
在所述目标视频帧包含运动且所述相似度小于第一设定值的情况下,确定所述目标视频帧为前景关键帧;
在所述目标视频帧不包含运动且所述相似度小于第二设定值的情况下,确定所述目标视频帧为背景关键帧。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
分别对所述第一视频帧、所述第二视频帧和所述目标视频帧进行图像滤波;
分别对滤波后的所述第一视频帧、所述第二视频帧和所述目标视频帧进行图像锐化。
3.根据权利要求1所述的方法,其特征在于,所述根据所述第一相邻差值图和所述第二相邻差值图判断所述目标视频帧是否包含运动包括:
分别对所述第一相邻差值图和所述第二相邻差值图进行二值化处理;
分别对二值化处理后的所述第一相邻差值图和所述第二相邻差值图进行形态学处理;
对形态学处理后的所述第一相邻差值图和所述第二相邻差值图进行与运算并滤除小面积连通区域以得到二值运动图像;
将所述二值运动图像中孤立的连通区域聚合成目标连通区域,并求出所述目标连通区域的外接矩形;
根据所述外接矩形的面积与所述目标视频帧的图像面积的比值判断所述目标视频帧是否包含运动。
4.根据权利要求3所述的方法,其特征在于,所述分别对二值化处理后的所述第一相邻差值图和所述第二相邻差值图进行形态学处理包括:
分别对所述二值化处理后的所述第一相邻差值图和所述第二相邻差值图进行腐蚀处理和膨胀处理。
5.根据权利要求3所述的方法,其特征在于,所述根据所述外接矩形的面积与所述目标视频帧的图像面积的比值判断所述目标视频帧是否包含运动包括:
计算所述外接矩形的面积与所述目标视频帧的图像面积的比值;
在所述外接矩形的面积与所述目标视频帧的图像面积的比值大于设定阈值的情况下,确定所述目标视频帧包含运动;
在所述外接矩形的面积与所述目标视频帧的图像面积的比值不大于设定阈值的情况下,确定所述目标视频帧不包含运动。
6.根据权利要求1所述的方法,其特征在于,所述确定所述目标视频帧与所述第二视频帧的相似度包括:
利用结构相似性算法计算所述目标视频帧与所述第二视频帧的相似度。
7.根据权利要求6所述的方法,其特征在于,所述相似度满足以下公式:
c1=(k1L)2;
c2=(k2L)2;
其中,SSIM(x,y)为所述目标视频帧和所述第二视频帧的相似度;x和y分别为所述目标视频帧和所述第二视频帧;μx和μy分别为所述目标视频帧和所述第二视频帧的图像灰度矩阵的平均值;σx2和σy2分别为所述目标视频帧和所述第二视频帧的图像灰度矩阵的方差值;σxy为所述目标视频帧和所述第二视频帧的图像灰度矩阵的协方差;c1和c2为用来维持稳定的常数;L为像素值的动态范围;k1=0.01;k2=0.03。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中科云谷科技有限公司;中联重科股份有限公司,未经中科云谷科技有限公司;中联重科股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110983987.3/1.html,转载请声明来源钻瓜专利网。