[发明专利]视频处理方法、装置、电子设备及存储介质有效
申请号: | 201911423372.4 | 申请日: | 2019-12-31 |
公开(公告)号: | CN111104930B | 公开(公告)日: | 2023-07-11 |
发明(设计)人: | 李岩;史欣田;纪彬;康斌 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/82;G06N3/02;H04N21/234;H04N21/44;H04N21/845 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 李娟 |
地址: | 518044 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 装置 电子设备 存储 介质 | ||
1.一种视频处理方法,其特征在于,包括:
分别获取待处理的视频帧序列中各个视频帧的至少两个第一特征信息;
至少获取两个相邻视频帧之间各个第一特征信息对应的差异度;
根据两个相邻视频帧之间各个第一特征信息对应的差异度,对两个相邻视频帧中的至少一个视频帧的各个第一特征信息进行增强处理,其中,增强处理的强度与差异度正相关;
基于各个视频帧的增强处理后的第一特征信息,确定所述视频帧序列对应的类别;
其中,基于各个视频帧的增强处理后的第一特征信息,确定所述视频帧序列对应的类别,包括:
基于多个特征提取层和至少一个帧间差激活层,分别从各个视频帧的增强处理后的第一特征信息中逐级提取各个视频帧的至少两个第二特征信息,其中,所述至少一个帧间差激活层中的每个帧间差激活层分别设置在所述多个特征提取层中的两个相邻特征提取层之间;
其中,每个特征提取层分别从输入数据中提取各个视频帧的至少两个第二特征信息并输出,其中第一个特征提取层的输入数据包括各个视频帧的增强处理后的第一特征信息,除第一个特征提取层以外的其他各特征提取层的输入数据为特征提取层的上一层输出的数据;
其中,每个帧间差激活层根据位于其上一层的特征提取层输出的各个视频帧的至少两个第二特征信息,至少获取两个相邻视频帧之间各个第二特征信息对应的差异度,根据两个相邻视频帧之间各个第二特征信息对应的差异度,对两个相邻视频帧中的至少一个视频帧的各个第二特征信息进行增强处理并输出;
根据最后一个特征提取层输出的各个视频帧的第二特征信息,确定所述视频帧序列对应的类别。
2.根据权利要求1所述的方法,其特征在于,所述根据两个相邻视频帧之间各个第一特征信息对应的差异度,对两个相邻视频帧中的至少一个视频帧的各个第一特征信息进行增强处理,具体包括:
分别根据两个相邻视频帧之间各个第一特征信息对应的差异度,确定各个第一特征信息对应的权重,权重与差异度正相关;
将两个相邻视频帧中的至少一个视频帧的各个第一特征信息分别乘上各个第一特征信息对应的权重,得到所述至少一个视频帧的增强处理后的第一特征信息。
3.根据权利要求1所述的方法,其特征在于,所述获取两个相邻视频帧之间各个第一特征信息对应的差异度,具体包括:
计算两个相邻视频帧之间各个第一特征信息对应的第一差异度;
根据至少两个第一特征信息对应的第一差异度,确定所述至少两个第一特征信息中的一个第一特征信息对应的差异度。
4.根据权利要求3所述的方法,其特征在于,所述根据至少两个第一特征信息对应的第一差异度,确定所述至少两个第一特征信息中的一个第一特征信息对应的差异度,具体包括:
对第一差异度向量进行卷积操作,得到第二差异度向量,所述第一差异度向量包括各个第一特征信息对应的第一差异度;
对所述第二差异度向量进行卷积操作,得到第三差异度向量,所述第三差异度向量的长度等于所述第一差异度向量的长度;
分别将所述第三差异度向量中各个第一特征信息对应的第三差异度作为各个第一特征信息对应的差异度。
5.根据权利要求1所述的方法,其特征在于,所述根据两个相邻视频帧之间各个第二特征信息对应的差异度,对两个相邻视频帧中的至少一个视频帧的各个第二特征信息进行增强处理,具体包括:
分别根据两个相邻视频帧之间各个第二特征信息对应的差异度,确定各个第二特征信息对应的权重,权重与差异度正相关;
将两个相邻视频帧中的至少一个视频帧的各个第二特征信息分别乘上各个第二特征信息对应的权重,得到所述一个视频帧的增强处理后的第二特征信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911423372.4/1.html,转载请声明来源钻瓜专利网。