[发明专利]基于生成协同判别网络的视频异常事件检测方法及系统有效
申请号: | 202110468639.2 | 申请日: | 2021-04-28 |
公开(公告)号: | CN113011399B | 公开(公告)日: | 2023-10-03 |
发明(设计)人: | 李洪均;李超波;申栩林;陈俊杰;章国安 | 申请(专利权)人: | 南通大学 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/774;G06V10/82;G06N3/0475;G06N3/045 |
代理公司: | 北京高沃律师事务所 11569 | 代理人: | 韩雪梅 |
地址: | 226019 江苏省*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 生成 协同 判别 网络 视频 异常 事件 检测 方法 系统 | ||
1.一种基于生成协同判别网络的视频异常检测方法,其特征在于,所述检测方法包括:
采集正常的视频监控数据;
将所述视频监控数据转换为原始帧I1,…,It;
在所述原始帧中选取第t帧作为原始未来帧It;
在所述原始未来帧中添加噪声η~N(0,σ2I),得到噪声未来帧I′t;
将所述原始帧输入到生成器中,生成器根据前t-1的连续帧I1,…,It-1学习空间特征和时间特征,得到预测未来帧
计算所述预测未来帧和所述原始未来帧的前一帧It-1之间的光流信息,记为第一光流信息
计算所述原始未来帧It和所述原始未来帧的前一帧It-1之间的光流信息,记为第二光流信息f(It-1,It);
计算所述第一光流信息和所述第二光流信息的差异,
将所述预测未来帧和所述原始未来帧It输入至判别器中,得到预测未来帧属于原始帧I1,…,It的概率和原始未来帧It属于原始帧I1,…,It的概率D(It);
根据所述概率和所述概率D(It)构建判别器的目标函数;
将所述噪声未来帧I′t和所述预测未来帧输入至协同器中,得到噪声未来帧I′t属于正常未来帧的概率A(I′t)和预测未来帧属于正常未来帧的概率
根据所述概率A(I′t)和所述概率构建协同器的目标函数;
将所述第一光流信息和所述第二光流信息的差异fd、所述概率以及所述概率反馈给生成器,与所述判别器对抗训练,与协同器协同训练优化所述生成器,并构建生成器的目标函数;
基于所述判别器的目标函数、协同器的目标函数以及生成器的目标函数,在迭代过程中不断更新生成器、判别器和协同器,直到生成器、判别器和协同器都无法提升时结束;
基于所述更新后的生成器,确定测试时的预测未来帧
计算所述预测未来帧和所述原始未来帧It的峰值信噪比;
基于所述峰值信噪比计算异常分数;
根据所述异常分数确定待测帧是否存在异常。
2.根据权利要求1所述的基于生成协同判别网络的视频异常检测方法,其特征在于,在所述“基于所述判别器的目标函数、协同器的目标函数以及生成器的目标函数,在迭代过程中不断更新生成器、判别器和协同器,直到生成器、判别器和协同器都无法提升时结束”步骤之后还包括:
计算像素损失,根据所述像素损失优化所述生成器;
计算梯度损失,根据所述梯度损失优化所述生成器。
3.根据权利要求2所述的基于生成协同判别网络的视频异常检测方法,其特征在于,所述像素损失采用以下公式:
其中,表示原始未来帧It和预测未来帧之间的像素损失,||·||2表示L2范数。
4.根据权利要求2所述的基于生成协同判别网络的视频异常检测方法,其特征在于,所述梯度损失采用以下公式:
其中,表示原始未来帧It和预测未来帧之间梯度损失,(i,j)表示像素的空间位置,||·||1表示L1范数。
5.根据权利要求1所述的基于生成协同判别网络的视频异常检测方法,其特征在于,所述判别器的目标函数为:
其中,为预测未来帧属于原始帧I1,…,It的概率,D(It)为原始未来帧It属于原始帧I1,…,It的概率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南通大学,未经南通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110468639.2/1.html,转载请声明来源钻瓜专利网。