[发明专利]身份、位置和动作识别方法、系统、电子设备及存储介质

说明书

本发明涉及一种身份、位置和动作识别方法、系统、电子设备及存储介质，所述身份、位置和动作识别系统包括身份识别模块、位置识别模块和/或动作识别模块；所述身份识别模块用于基于人员的图像识别所述人员的身份；所述位置识别模块用于基于从相对位置固定的多个相机同时获取的所述人员的图像识别所述人员的位置；所述动作识别模块用于基于包括所述人员的图像的视频帧序列识别所述人员的动作。根据本发明实施例提供的身份、位置和动作识别系统和方法，通过身份识别模块、位置识别模块及动作识别模块能够在人流密集的空间中识别人员身份，确定人员位置及该人员的行为，从而节省工作人员的精力，实现智能化、主动化的监控。

技术领域

本发明涉及与智能空间结合的安防领域，尤其涉及一种身份、位 置和动作识别方法、系统、电子设备及存储介质。

背景技术

现代社会的很多公共场所如市政场所、工业区、医院、校园、体 育馆、商场、饭店、商业写字楼等，人口密集且流动性大，为了保证 正常运转，通常设置了大量工作人员来维持良好的秩序并应对突发状 况。随着现代信息技术的发展，很多场所安装了具有视频监控系统的 安防系统，然而目前安防系统中，视频监控系统与报警系统往往相互 独立，视频监控系统依旧是传统的被动监控模式，只能对异常情况进 行视频记录。

智慧空间是嵌入了计算、信息设备和多模态的传感装置的工作或 生活空间，具有自然便捷的交互接口，以支持人们方便地获得计算机 系统的服务。可以应用到学校、医院、行政机构、商场、食堂、体育 馆等场景，用于智能视频监控、智能考勤和智能教学等功能，形成物 理空间与网络信息空间的融合，未来在智能家居，智能安防，人机交 互等众多领域有着广阔的应用前景，对于构建数字化、网络化和智能 化的智慧城市具有重要的现实意义。

发明内容

本发明的目的是提供一种身份、位置和动作识别方法、系统、电 子设备及存储介质，用以至少部分解决现有技术中存在的问题。

具体地，本发明实施例提供了以下技术方案：

第一方面，本发明提供了一种身份、位置和动作识别系统，包括： 身份识别模块、位置识别模块和/或动作识别模块；

所述身份识别模块用于基于人员的图像识别所述人员的身份；

所述位置识别模块用于基于从相对位置固定的多个摄像装置同 时获取的所述人员的图像识别所述人员的位置；

所述动作识别模块用于基于包括所述人员的图像的视频帧序列 识别所述人员的动作。

可选地，所述身份识别模块包括人脸识别模块，所述人脸识别模 块用于：

用OpenPose对所述人员的图像中的人脸图像进行特征点捕捉。

基于所述特征点将所述人脸图像旋转到水平位置；

将水平位置的所述人脸图像分成五部分输入TP-GAN，得到正面 人脸图像；

使用Dlib中的ResNet-29网络从所述正面人脸图像提取特征向量；

基于所述特征向量使用存储有与身份信息对应的图像数据的数 据库进行相似度判别，识别所述人员的身份。

可选地，所述基于所述特征点将所述人脸图像旋转到水平位置包 括：

计算所述人脸图像中左眼和右眼的像素坐标之差，得到待旋转角 度；

以左眼像素坐标为旋转中心，将人脸图像旋转待旋转角度，得到 水平位置的所述人脸图像。

可选地，将水平位置的所述人脸图像分成五部分输入TP-GAN包 括：

从所述人脸图像裁剪出左眼部分、右眼部分、鼻子部分、嘴巴部 分；