[发明专利]行人监控方法和装置

说明书

技术领域

本发明涉及计算机领域，更具体地涉及一种行人监控方法和装置。

背景技术

在监控领域，往往需要配合很多人力来对被监控区域的安全进行分析以及维护。即使在被监控区域安装很多摄像头，其也往往只是用来帮助事后的调查取证，并没有真正起到实时的危险预防和保护被监控区域安全的作用。随着人工智能技术的发展，已经开始有算法和系统进行视频数据的结构化处理，以实现对危险行为的实时监控。但是在现有技术中，对视频数据的利用往往只是单维度的，例如只是做人脸检测来判断进入被监控区域的人员是否是可疑人员，或者只是利用进入被监控区域的人员的某些动作来判断是否有危险情况发生，而没有实际利用进入被监控区域的人员的身份信息。

发明内容

考虑到上述问题而提出了本发明。本发明提供了一种行人监控方法和装置。

根据本发明一方面，提供了一种行人监控方法。该行人监控方法包括：获取视频；检测所述视频包含的一个或多个行人；对于所述一个或多个行人中的每一个，识别该行人的身份；对于所述一个或多个行人中的每一个，识别该行人的身份，确定该行人在包含该行人的至少一个视频帧中的动作；以及对于所述一个或多个行人中的每一个，根据该行人的身份和该行人在所述包含该行人的至少一个视频帧中的动作确定该行人是否做出异常行为。

其中，包含该行人的至少一个视频帧，可以为包含该行人的一个视频帧，也可以为包含该行人的多个视频帧(例如包含该行人的每个视频帧)。

示例性地，所述检测所述视频包含的一个或多个行人包括：针对所述视频的选定视频帧进行行人检测，以确定所述视频的选定视频帧中存在行人的位置；以及根据所述视频的选定视频帧中存在行人的位置对所述一个或多个行人中的每一个进行行人跟踪。

示例性地，所述针对所述视频的选定视频帧进行行人检测包括：针对所述视频的选定视频帧中的每个视频帧，检测该视频帧中的包含行人的行人框的位置及行人框属于行人的概率值；以及针对所述视频的选定视频帧中的每个视频帧，选择概率值超过阈值的行人框；其中，所述存在行人的位置为所选择的行人框的位置。

示例性地，在所述对于所述一个或多个行人中的每一个，确定该行人在包含该行人的至少一个视频帧中的动作之前，所述行人监控方法进一步包括：对于所述一个或多个行人中的每一个，针对在所述包含该行人的至少一个视频帧中的、与该行人相对应的行人框进行行人姿态估计，以确定该行人在所述包含该行人的至少一个视频帧中的每个视频帧中的姿态信息。

示例性地，在所述对于所述一个或多个行人中的每一个，针对在所述包含该行人的至少一个视频帧中的、与该行人相对应的行人框进行行人姿态估计之后，所述行人监控方法进一步包括：对于所述一个或多个行人中的每一个，根据该行人的行人跟踪结果对该行人在所述包含该行人的至少一个视频帧中的每个视频帧中的姿态信息进行时间轴上的平滑。

示例性地，所述姿态信息包括行人的人体关键点的位置。

示例性地，所述对于所述一个或多个行人中的每一个，识别该行人的身份包括：

将通过下列身份确定操作之一所确定的行人身份作为该行人的身份，或者结合下列身份确定操作中的两项或三项所确定的行人身份来确定该行人的身份：

第一身份确定操作：至少根据该行人在包含该行人的一个或多个视频帧中的姿态信息获得该行人的人脸信息，并基于该行人的人脸信息确定行人身份；

第二身份确定操作：至少根据该行人在包含该行人的一个或多个视频帧中的姿态信息获得该行人的关键点距离信息，并基于该行人的关键点距离信息确定行人身份；以及

第三身份确定操作：至少根据该行人在包含该行人的一个或多个视频帧中的姿态信息获得该行人的运动信息，并基于该行人的运动信息确定行人身份。

示例性地，所述人脸信息包括人脸位置，所述第一身份确定操作包括：针对所述包含该行人的一个或多个视频帧中的每一个，根据该行人在该视频帧中的姿态信息和在该视频帧中的、与该行人相对应的行人框的位置确定该行人在该视频帧中的人脸位置；针对所述包含该行人的一个或多个视频帧中的每一个，基于该行人在该视频帧中的人脸位置处的原始像素数据进行人脸识别，以获得身份信息；以及根据针对所述包含该行人的一个或多个视频帧所获得的身份信息确定行人身份。