[发明专利]一种基于LSTM的实时异常行为监测方法在审

专利信息
申请号: 202011328760.7 申请日: 2020-11-24
公开(公告)号: CN112560582A 公开(公告)日: 2021-03-26
发明(设计)人: 于治楼;艾腾腾;毕茂华;马晓光 申请(专利权)人: 超越科技股份有限公司
主分类号: G06K9/00 分类号: G06K9/00;G06N3/04;G06N3/08
代理公司: 济南信达专利事务所有限公司 37100 代理人: 阚恭勇
地址: 250100 山东省*** 国省代码: 山东;37
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 lstm 实时 异常 行为 监测 方法
【权利要求书】:

1.一种基于LSTM的实时异常行为监测方法,其特征在于,

利用opencv视频处理库将监控视频转为帧,基于Apache Spark构建在采集端的视频流收集器,使用Gson库将数据转换为JSON消息,将这些消息发送至Kafka的Topic分区上,使用Kafka Producer客户端将JSON消息发送至Kafka broker,最终由服务器端的视频收集器消费和处理来自kafka的数据;利用spark集群调用karas训练好的openpose模型,特征图数据送入模型后送入lstm神经网络模型来判读行为的异常性。

2.根据权利要求1所述的方法,其特征在于,

包括以下步骤:

(1)视频获取:使用视频获取单元获取实时视频,

(2)视频处理:利用OpenCV库转换视频,并将转换后信息推送至kafka服务器,由基于Spark的视频流处理器消费缓存中的视频帧数据;

(3)姿态识别:通过OpenPose构建姿态识别模型,以所述特征图作为输入,对人体姿态进行识别,得到OpenPose姿态的评估信息;

(4)行为判断:以人体姿态的识别的评估信息作为输入,构建lstm网络模型判断该连续动作是否为异常行为并判断异常行为的类型。

3.根据权利要求2所述的方法,其特征在于,

所述的视频获取单元包括辅助安保的监控系统。

4.根据权利要求3所述的方法,其特征在于,

还包括实时采集监控视频的摄像机、以及将所述的监控视频传入采集端的传输设备。

5.根据权利要求2所述的方法,其特征在于,

步骤(2)视频处理的详细步骤为:

(1)利用OpenCV库转换视频,将每帧图像存储为Mat对象,从Mat对象中提取视频帧的完整信息,使用JSON数据格式保字;

(2)将视频帧的完整信息发送至Kafka服务器缓存;

(3)基于Spark的视频流处理器消费缓存中的视频帧数据,使用OpenCV库中的算法分析视频采集模块是供的实时视频帧数据,进行特征提取后得到特征图。

6.根据权利要求2所述的方法,其特征在于,

所述的人体姿态识别模型通过OpenPose基于MPII数据库数据训练得到。

7.根据权利要求2所述的方法,其特征在于,

步骤(4)行为判读中构建的LSTM网络模型是基于UMN数据库训练的。

8.根据权利要求7所述的方法,其特征在于,

步骤(4)行为判读中构建的LSTM内部主要有三个阶段:

忘记阶段、选择记忆阶段和输出阶段。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于超越科技股份有限公司,未经超越科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011328760.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top