[发明专利]视频卡顿检测方法、装置和存储介质有效
申请号: | 202110144611.3 | 申请日: | 2021-02-03 |
公开(公告)号: | CN112511821B | 公开(公告)日: | 2021-05-28 |
发明(设计)人: | 余冠东;易高雄;吴庆波;龚桂良 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | H04N17/00 | 分类号: | H04N17/00 |
代理公司: | 北京励诚知识产权代理有限公司 11647 | 代理人: | 赵爽 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频卡 检测 方法 装置 存储 介质 | ||
1.一种视频卡顿检测方法,其特征在于,包括:
获取待检测视频中的多个待检测视频帧;
对所述多个待检测视频帧中的相邻视频帧做差处理,得到所述相邻视频帧的帧差的像素强度图;
对所述相邻视频帧的帧差的像素强度图进行二值化处理,得到所述相邻视频帧的帧差的二值化图像;
计算所述相邻视频帧的帧差的二值化图像的期望值,其中,所述二值化图像的期望值为所述二值化图像中的像素值的平均值;
对所述相邻视频帧的帧差的二值化图像的期望值进行取对数处理,得到所述相邻视频帧的帧差的二值化图像的目标期望值;
其中,所述对所述相邻视频帧的帧差的二值化图像的期望值进行取对数处理,得到所述相邻视频帧的帧差的二值化图像的目标期望值,包括:
根据如下公式,确定所述相邻视频帧的帧差的二值化图像的目标期望值:
E’(I)=log2(1+E(I))
其中,所述I表示所述相邻视频帧的帧差的二值化图像,E(I)表示所述相邻视频帧的帧差的二值化图像的期望值,E’(I)表示所述相邻视频帧的帧差的二值化图像的目标期望值;
根据所述相邻视频帧的帧差的二值化图像的目标期望值,进行视频卡顿检测;
其中,若所述二值化图像的目标期望值大于第二阈值,确定未发生卡顿事件;或者,若所述二值化图像的目标期望值小于或等于第二阈值,确定发生卡顿事件,所述第二阈值根据视频样本中的相邻视频帧的二值化图像的目标期望值的图像中发生卡顿的可视化折线位置所对应的目标期望值确定,其中,所述目标期望值的图像的横坐标为相邻视频帧的帧差的二值化图像的编号,所述目标期望值的图像的纵坐标为相邻视频帧的帧差的二值化图像的目标期望值。
2.根据权利要求1所述的方法,其特征在于,所述对所述相邻视频帧的帧差的像素强度图进行二值化处理,得到所述相邻视频帧的帧差的二值化图像,包括:
将所述相邻视频帧的帧差的像素强度图中大于或等于第三阈值的像素值设置为255,以及,将所述相邻视频帧的帧差的像素强度图中小于第三阈值的像素值设置为零,得到所述相邻视频帧的帧差的二值化图像。
3.根据权利要求1所述的方法,其特征在于,所述相邻视频帧包括第一视频帧和第二视频帧,所述第一视频帧为所述相邻视频帧中时间靠前的视频帧,所述第二视频帧为所述相邻视频帧中时间靠后的视频帧;
其中,所述对所述多个待检测视频帧中的相邻视频帧做差处理,得到所述相邻视频帧的帧差的像素强度图,包括:
若所述第二视频帧的期望值和所述第一视频帧的期望值的差值的绝对值小于或等于第四阈值,将所述第二视频帧减去所述第一视频帧得到所述相邻视频帧的帧差的像素强度图;或者
若所述第一视频帧的期望值和所述第二视频帧的期望值的差值的绝对值大于第四阈值,将所述第二视频帧和所述第一视频帧中期望值较大的视频帧减去期望值较小的视频帧得到所述相邻视频帧的帧差的像素强度图;
其中,所述第一视频帧的期望值为所述第一视频帧中的像素值的平均值,所述第二视频帧的期望值为所述第二视频帧中的像素值的平均值。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述获取待检测视频中的多个待检测视频帧,包括:
根据人眼对视频卡顿的最小感知时间确定抽帧的帧率;
根据所述帧率获取所述待检测视频中的多个视频帧;
将所述多个视频帧转换为灰度图,并对所述多个视频帧的灰度图进行下采样处理,得到多个待检测视频帧。
5.根据权利要求4所述的方法,其特征在于,所述多个待检测视频帧中不包括期望值小于第五阈值的视频帧以及期望值大于第六阈值的视频帧。
6.根据权利要求1-3中任一项所述的方法,其特征在于,在所述根据所述相邻视频帧的帧差的二值化图像的目标期望值,进行视频卡顿检测之后,所述方法还包括:
根据所述多个待检测视频帧中的每次卡顿事件的卡顿信息,确定所述待检测视频的卡顿信息,其中,所述待检测视频的卡顿信息包括以下中的至少一项:
所述待检测视频的卡顿总次数,卡顿总时长,单次卡顿事件的持续时长。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110144611.3/1.html,转载请声明来源钻瓜专利网。