[发明专利]面审视频的场景分类方法、装置、设备及存储介质有效
申请号: | 202110610391.9 | 申请日: | 2021-06-01 |
公开(公告)号: | CN113221835B | 公开(公告)日: | 2023-06-20 |
发明(设计)人: | 潘浩;庄伯金 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/764;G06V10/774;G06V10/82;G06V40/10;G06N3/0464 |
代理公司: | 深圳市精英专利事务所 44242 | 代理人: | 李翔宇 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 审视 场景 分类 方法 装置 设备 存储 介质 | ||
本申请涉及人工智能技术领域,公开了面审视频的场景分类方法、装置、设备及存储介质,通过从面审视频中,获取至少一个视频图像;将至少一个视频图像进行处理,得到用于场景分类的识别图像;将识别图像进行图像特征提取,得到识别图像的特征图;将识别图像进行处理,得到识别图像的人像抑制图,人像抑制图为特征图,人像抑制图在识别图像中人像区域的平均值不大于a,且在识别图像中非人像区域的平均值大于a,a大于0且小于1;将识别图像的特征图,与人像抑制图相乘,得到场景特征图;将场景特征图通过场景分类模型进行分类,得到面审视频的场景类型,提高了面审视频的分类效率。
技术领域
本申请涉及分类算法技术领域,尤其涉及一种面审视频的场景分类方法、装置、设备及存储介质。
背景技术
场景分类是视觉应用领域的一大关注点,所谓场景分类,就是依据输入的图像或者视频,判断该输入所处的环境类别,比如:教室、机场、图书馆等。依据输入数据类型的不同,可以分为图像场景分类和视频场景分类。对于图像场景分类任务而言,使用目前比较成熟的二维(2D)卷积神经网络(convolutional neural networks,CNN)就可以做到比较高的识别精度,而对于视频任务,则可以使用三维(3D)卷积神经网络、双流卷积神经网络、循环神经网络等方法进行处理。
普通场景分类,场景信息在图像中占据大部分空间,这些信息可以很容易发挥卷积神经网络的性能。但是对于面审视频而言,人脸占据画面中的绝大部分位置,而场景信息在画面中只占小部分。面审视频是指在信贷审批、面试或其他场景下产生的面对面审核视频。如何利用一段视频中仅有的这些信息进行有效的场景分类,目前通常用三维卷积神经网络进行视频特征提取并分类,但易被视频中的人像影响,且提取视频特征工作量大,并不能高效的分类面审视频,以使面审视频分类效率低。
发明内容
本申请实施例提供了一种面审视频的场景分类方法、装置、设备及存储介质,旨在解决现有技术中面审视频分类效率低的问题。
第一方面,本申请实施例提供了一种面审视频的场景分类方法,其包括:从面审视频中,获取至少一个视频图像;将所述至少一个视频图像进行处理,得到用于场景分类的识别图像;将所述识别图像进行图像特征提取,得到所述识别图像的特征图;将所述识别图像进行图像特征处理,将所述识别图像中人像区域的平均特征值控制在(0,a),将所述识别图像中非人像区域的平均特征值控制在[a,1),得到所述识别图像的人像抑制图;将所述识别图像的特征图,与所述人像抑制图相乘,得到场景特征图;将所述场景特征图通过场景分类模型进行分类,得到所述面审视频的场景类型。
在一种可选的实现方式中,所述从面审视频中,获取至少一个视频图像,包括:按照视频截取周期,从所述面审视频中截取若干所述视频图像;所述视频截取周期、面审视频的时长,视频图像的数量满足:(N+1)*XY其中,N为所述视频图像的数量,W为所述视频截取周期,Y为所述面审视频的时长,所述N为大于1的整数。
在一种可选的实现方式中,所述将所述至少一个视频图像进行处理,得到用于场景分类的识别图像,包括:将所述N个所述视频图像以平铺的形式进行拼接,得到用于场景分类的所述识别图像,所述N个所述视频图像在所述识别图像中不存在重叠的像素,相邻的所述视频图像之间的间隔不超过1个像素。
在一种可选的实现方式中,所述将所述识别图像进行图像特征处理,将所述识别图像中人像区域的平均特征值控制在(0,a),将所述识别图像中非人像区域的平均特征值控制在[a,1),得到所述识别图像的人像抑制图,包括:将所述识别图像输入至人像抑制器,得到所述人像抑制图;所述人像抑制器为经过训练的二维卷积神经网络,所述人像抑制器用于识别所述识别图像的人像区域和非人像区域,将所述识别图像的人像区域转化为特征值b,并将所述识别图像的非人像区域转化为特征值c,其中,0≤bac≤1。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110610391.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种功能性水稻栽培方法
- 下一篇:应用云端存储的炒茶机成品鉴定平台