[发明专利]视频处理方法、装置、电子设备及存储介质有效
申请号: | 201911423372.4 | 申请日: | 2019-12-31 |
公开(公告)号: | CN111104930B | 公开(公告)日: | 2023-07-11 |
发明(设计)人: | 李岩;史欣田;纪彬;康斌 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/82;G06N3/02;H04N21/234;H04N21/44;H04N21/845 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 李娟 |
地址: | 518044 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 装置 电子设备 存储 介质 | ||
本申请涉及计算机技术领域,公开了一种视频处理方法、装置、电子设备及存储介质,涉及人工智能技术,利用人工智能中机器学习技术进行视频处理,使得提取的视频特征包含更多视频帧之间的运动信息,提升了对动态视频的特征提取能力,进而提高了视频分类的准确度。所述方法包括:分别获取待处理的视频帧序列中各个视频帧的至少两个第一特征信息;至少获取两个相邻视频帧之间各个第一特征信息对应的差异度;根据两个相邻视频帧之间各个第一特征信息对应的差异度,对两个相邻视频帧中的至少一个视频帧的各个第一特征信息进行增强处理,其中,增强处理的强度与差异度正相关;基于各个视频帧的增强处理后的第一特征信息,确定视频帧序列对应的类别。
技术领域
本申请涉及计算机技术领域,尤其涉及一种视频处理方法、装置、电子设备及存储介质。
背景技术
近年来,视频处理技术得到了快速的发展,已在动作识别、视频分类等领域得到广泛地应用。现有的视频处理方法中,通常是将视频中的每一帧图像当作单独的一幅图片进行处理,以获得每一帧图像的图像特征,然后对每一帧图像的图像特征在时间维度进行融合,以充分利用时间信息进行建模,得到包含与时间信息相关的运动信息的视频特征,最后,基于视频特征确定这一段视频所属的类别。
发明内容
本申请实施例提供一种视频处理方法、装置、电子设备及存储介质,使得提取的视频特征包含更多视频帧之间的运动信息,提升了对动态视频的特征提取能力,进而提高了视频分类的准确度。
一方面,本申请一实施例提供了一种视频处理方法,包括:
分别获取待处理的视频帧序列中各个视频帧的至少两个第一特征信息;
至少获取两个相邻视频帧之间各个第一特征信息对应的差异度;
根据两个相邻视频帧之间各个第一特征信息对应的差异度,对两个相邻视频帧中的至少一个视频帧的各个第一特征信息进行增强处理,其中,增强处理的强度与差异度正相关;
基于各个视频帧的增强处理后的第一特征信息,确定所述视频帧序列对应的类别。
一方面,本申请一实施例提供了一种视频处理装置,包括:
特征提取模块,用于分别获取待处理的视频帧序列中各个视频帧的至少两个第一特征信息;
差异度计算模块,用于至少获取两个相邻视频帧之间各个第一特征信息对应的差异度;
增强处理模块,用于根据两个相邻视频帧之间各个第一特征信息对应的差异度,对两个相邻视频帧中的至少一个视频帧的各个第一特征信息进行增强处理,其中,增强处理的强度与差异度正相关;
识别模块,用于基于各个视频帧的增强处理后的第一特征信息,确定所述视频帧序列对应的类别。
可选地,所述识别模块,具体用于:
基于多个特征提取层和至少一个帧间差激活层,分别从各个视频帧的增强处理后的第一特征信息中逐级提取各个视频帧的至少两个第二特征信息,其中,所述至少一个帧间差激活层中的每个帧间差激活层分别设置在所述多个特征提取层中的两个相邻特征提取层之间;
其中,每个特征提取层分别从输入数据中提取各个视频帧的至少两个第二特征信息并输出,其中第一个特征提取层的输入数据包括各个视频帧的增强处理后的第一特征信息,除第一个特征提取层以外的其他各特征提取层的输入数据为特征提取层的上一层输出的数据;
其中,每个帧间差激活层根据位于其上一层的特征提取层输出的各个视频帧的至少两个第二特征信息,至少获取两个相邻视频帧之间各个第二特征信息对应的差异度,根据两个相邻视频帧之间各个第二特征信息对应的差异度,对两个相邻视频帧中的至少一个视频帧的各个第二特征信息进行增强处理并输出;
根据最后一个特征提取层输出的各个视频帧的第二特征信息,确定所述视频帧序列对应的类别。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911423372.4/2.html,转载请声明来源钻瓜专利网。