[发明专利]视频检测方法、装置、设备及计算机可读存储介质在审
申请号: | 202210639497.6 | 申请日: | 2022-06-06 |
公开(公告)号: | CN114998800A | 公开(公告)日: | 2022-09-02 |
发明(设计)人: | 张健;程宝平;吴楠 | 申请(专利权)人: | 中移(杭州)信息技术有限公司;中国移动通信集团有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/82;G06V10/80;G06V10/774;G06V10/764;G06N3/08;G06N3/04 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胥巧莉 |
地址: | 311100 浙江省杭州市余*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 检测 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种视频检测方法,其特征在于,所述视频检测方法包括以下步骤:
获取待测视频的音频信号,确定所述音频信号的音频深度特征,检测所述音频信号是否为涉黄音频信号;
若是,则确定所述待测视频中与所述音频信号对应的目标视频,并确定所述目标视频的视觉深度特征;
根据所述音频深度特征和所述视觉深度特征构建融合特征矩阵;
若根据所述融合特征矩阵确定所述待测视频为存在涉黄的视频,则确定所述待测视频中的目标涉黄视频内容。
2.如权利要求1所述的视频检测方法,其特征在于,所述若根据所述融合特征矩阵确定所述待测视频为存在涉黄的视频,则确定所述待测视频中的目标涉黄视频片段的步骤,包括:
根据所述融合特征矩阵确定所述目标视频中是否存在涉黄特征;
若所述目标视频中存在涉黄特征,则确定所述待测视频为存在涉黄的视频,并将所述目标视频划分为多个时长等同的待测视频片段,并根据各所述待测视频片段确定所述待测视频中的目标涉黄视频内容。
3.如权利要求2所述的视频检测方法,其特征在于,所述根据各所述待测视频片段确定所述待测视频中的目标涉黄视频内容的步骤,包括:
遍历各所述待测视频片段,基于所述融合特征矩阵确定遍历的所述待测视频片段中是否存在所述涉黄特征;
若遍历的所述待测视频片段中存在所述涉黄特征,则确定遍历的所述待测视频片段对应的时间段,并将所述待测视频中和所述时间段匹配的视频内容作为目标涉黄视频内容。
4.如权利要求3所述的视频检测方法,其特征在于,所述将所述待测视频中和所述时间段匹配的视频内容作为目标涉黄视频内容的步骤之后,还包括:
确定所述待测视频中与所述目标视频相邻的相邻视频,确定所述相邻视频中是否存在具有所述涉黄特征的视频片段;
若所述相邻视频中存在具有所述涉黄特征的视频片段,则将所述待测视频中和所述具有所述涉黄特征的视频片段对应的视频内容作为目标涉黄视频内容。
5.如权利要求1所述的视频检测方法,其特征在于,所述根据所述音频深度特征和所述视觉深度特征构建融合特征矩阵的步骤,包括:
对所述音频深度特征进行长短期记忆网络训练,得到音频训练特征;
对所述视觉深度特征进行所述长短期记忆网络训练,得到视觉训练特征;
对所述音频训练特征和所述视觉训练特征进行特征提取融合,得到初步融合特征;
根据所述初步融合特征和所述音频训练特征构建音频融合特征,并根据所述初步融合特征和所述视觉训练特征构建视觉融合特征;
根据所述音频融合特征和所述视觉训练特征构建融合特征矩阵。
6.如权利要求1所述的视频检测方法,其特征在于,所述确定所述目标视频的视觉深度特征的步骤,包括:
根据所述音频深度特征计算所述目标视频的视觉注意力权重,并提取所述目标视频的初始视觉深度特征;
根据所述视觉注意力权重和所述初始视觉深度特征计算视觉深度特征。
7.如权利要求1-6任一项所述的视频检测方法,其特征在于,所述确定所述音频信号的音频深度特征的步骤,包括:
将所述音频信号转换为音频谱图,并确定所述音频谱图的深度信息,根据所述深度信息提取所述音频谱图中的音频深度特征。
8.一种视频检测装置,其特征在于,所述视频检测装置包括:
获取单元,用于获取待测视频的音频信号,确定所述音频信号的音频深度特征,检测所述音频信号是否为涉黄音频信号;
确定单元,用于若是,则确定所述待测视频中与所述音频信号对应的目标视频,并确定所述目标视频的视觉深度特征;
构建单元,用于根据所述音频深度特征和所述视觉深度特征构建融合特征矩阵;
检测单元,用于若根据所述融合特征矩阵确定所述待测视频为存在涉黄的视频,则确定所述待测视频中的目标涉黄视频内容。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中移(杭州)信息技术有限公司;中国移动通信集团有限公司,未经中移(杭州)信息技术有限公司;中国移动通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210639497.6/1.html,转载请声明来源钻瓜专利网。