[发明专利]视频噪点识别方法、装置、设备及计算机可读存储介质在审
申请号: | 201910048947.2 | 申请日: | 2019-01-18 |
公开(公告)号: | CN110163837A | 公开(公告)日: | 2019-08-23 |
发明(设计)人: | 谯睿智;高永强;蓝玉海;张怀选;徐颖;賈佳亞;戴宇榮;沈小勇 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06T7/00 | 分类号: | G06T7/00;G06K9/62 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 噪点 视频 神经网络 帧差 连续视频帧 分类结果 纹理 计算机可读存储介质 神经网络输出 训练神经网络 严重程度分类 密集区域 视频分类 输出视频 自适应 采样 输出 预测 学习 | ||
1.一种视频噪点识别方法,其特征在于,包括:
从待识别视频中采样多组连续视频帧,分别计算每组连续视频帧所对应的帧差图;
将计算得到的所述帧差图输入深度神经网络进行噪点预测,输出视频分类结果;其中,所述深度神经网络为利用视频的帧差图作为训练神经网络的输入而训练得到的神经网络;所述深度神经网络输出的不同的分类结果对应不同的视频噪点严重程度;
根据所述视频分类结果输出噪点识别结果。
2.如权利要求1所述的方法,其特征在于,在所述分别计算每组连续视频帧所对应的帧差图的过程中,针对一组连续视频帧,包括:
确定所述一组连续视频帧中的中间视频帧,并计算所述一组连续视频帧的平均帧;
将所述中间视频帧与所述平均视频帧进行差值运算,得到所述一组连续视频帧所对应的帧差图。
3.如权利要求2所述的方法,其特征在于,所述将所述中间视频帧与所述平均视频帧进行差值运算,得到所述一组连续视频帧所对应的帧差图,包括:
将所述中间视频帧减去所述平均视频帧后,进行截断处理;
将截断处理后的帧差像素值平移到目标像素区间,得到所述一组连续视频帧所对应的帧差图。
4.如权利要求2所述的方法,其特征在于,所述将所述中间视频帧与所述平均视频帧进行差值运算,得到所述一组连续视频帧所对应的帧差图,包括:
将所述中间视频帧减去所述平均视频帧后取绝对值,得到所述一组连续视频帧所对应的帧差图。
5.如权利要求3所述的方法,其特征在于,所述一组连续视频帧包括n帧;所述将所述中间视频帧减去所述平均视频帧后,进行截断处理;将截断处理后的帧差像素值平移到目标像素区间,得到所述一组连续视频帧所对应的帧差图,包括:
通过公式计算得到所述一组连续视频帧所对应的帧差图;
其中,fi,0为中间视频帧,μi为平均视频帧,κ为截断阈值,1≤i≤n,n为正整数。
6.如权利要求1所述的方法,其特征在于,所述将计算得到的所述帧差图输入深度神经网络进行噪点预测,包括:
将所述帧差图按照预定比例进行收缩,收缩后帧差图的第一边长像素个数在第一范围值中,收缩后帧差图的第二边长像素个数在第二范围值中;
将收缩后的帧差图输入深度神经网络进行噪点预测。
7.如权利要求1-6所述的方法,其特征在于,所述利用视频的帧差图作为训练神经网络的输入而训练,包括:
对视频训练集中的每个视频进行采样,采样出视频的多组连续视频帧,分别计算每组连续视频帧所对应的帧差图;
将计算得到的所述帧差图以及所述视频对应的人工标签输入预训练神经网络进行训练;所述人工标签用于指示所述视频的噪点严重程度;
通过视频验证集来确定出训练后的预测模型的神经网络。
8.如权利要求7所述的方法,其特征在于,所述通过视频验证集来确定训练后的预测模型的神经网络之后,还包括:
通过确定出的所述预测模型的神经网络对视频测试集进行噪点预测;
根据预测结果以及所述视频测试集对应的人工标签生成视频分类的混淆矩阵。
9.一种视频噪点识别装置,其特征在于,包括:
采样计算单元,用于从待识别视频中采样多组连续视频帧,分别计算每组连续视频帧所对应的帧差图;
预测单元,用于将计算得到的所述帧差图输入深度神经网络进行噪点预测,输出视频分类结果;其中,所述深度神经网络为利用视频的帧差图作为训练神经网络的输入而训练得到的神经网络;所述深度神经网络输出的不同的分类结果对应不同的视频噪点严重程度;
识别结果输出单元,用于根据所述视频分类结果输出噪点识别结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910048947.2/1.html,转载请声明来源钻瓜专利网。