[发明专利]一种应用于校园安防的全天候视频寻人方法

权利要求书

1.一种应用于校园安防的全天候视频寻人方法，其特征在于，包括以下步骤：

S1、根据摄像头当前所捕获行人图像全身照的模态，使用与其相同模态的行人图像进行匹配；

S2、采用跨模态行人再识别技术匹配行人，行人再识别技术是在非重叠的摄像头视域中，检索指定的行人，在不同的摄像头中，能够识别出特定的行人；

S3、跨模态行人再识别将采用模态互转的方式，彩色图像和红外图像间能够互相转换，使得输入的待查询行人图像能够转换成与摄像头捕获的行人图像一致模态的图像，使得跨模态匹配问题转换为相同模态的匹配问题，从像素级别缓解跨模态差异；

S4、加入报警接收机制，以联动门禁系统，接收门禁系统的报警信息，并令报警门禁锁附近的摄像头捕获行人图像，从中找出嫌疑人的行人图像；门禁系统发现有警情后，门禁系统中的门禁锁捕获门前的图像，将图像和门禁锁的位置信息组合成报警信息，发送至视频监控系统，视频监控系统接收到门禁系统的报警信息，令该门禁系统周边的摄像头捕获行人图像，将门禁系统中的门禁锁捕获的图像作为辅助，匹配出嫌疑人的行人图像，并提取出匹配结果对应的视频帧，将匹配出的行人区域标注，将视频帧连同标注发送至安防人员处确认，将确认无误的视频帧中的行人图像作为待查询的行人图像，完成接下来的寻找嫌疑人任务；

S5、利用待查询行人图像对嫌疑人实时监控，并构建实时逃逸轨迹，嫌疑人实时监控指根据嫌疑人的行人图像，与所有摄像头捕获的视频图像中提取出的行人图像匹配。

2.根据权利要求1所述的应用于校园安防的全天候视频寻人方法，其特征在于，所述嫌疑人实时监控具体步骤如下：

步骤1-1：获取摄像头当前监控视频的一帧图像，并执行步骤1-2；

步骤1-2：将该帧图像进行行人检测，提取行人图像，确保每个范围都包含了行人全身，而且每个范围内的大部分内容为行人，每个行人的行人图像以摄像头编号、图像模态、时间、行人编号命名，这些行人图像存入实时行人图像集，执行步骤1-3；

步骤S1-3：将嫌疑人的行人图像作为待查询行人图像，与步骤S1-2中生成的实时行人图像集进行匹配，若匹配出相似度最高且达到指定阈值的行人图像，则将其作为疑似嫌疑人处理，根据该行人图像捕获的时间与摄像头位置信息，向该位置就近的工作人员发送嫌疑人的信息，并根据行人编号、时间、位置信息，构建该嫌疑人的实时逃逸轨迹，完成一轮实时监控；否则清空实时行人图像集，完成一轮实时监控。

3.根据权利要求1或2所述的应用于校园安防的全天候视频寻人方法，其特征在于，构建基于失踪时间区间内的行人图像数据库，行人图像数据库是行人图像的集合，行人图像数据库的构建由视频监控系统的所有摄像头完成，摄像头用来获取行人图像，行人图像数据库的构建方法包括如下步骤：

步骤2-1：摄像头每秒获取一帧图像；

步骤2-2：在步骤2-1获取的一帧图像中，利用行人检测技术选定每位行人所在的范围，确保每个范围都包含行人全身，而且每个范围内的大部分内容为行人；

步骤2-3：根据步骤2-2所选定的范围，截取行人图像，每个行人的行人图像以摄像头编号、图像模态、时间、行人编号命名；

步骤2-4：将步骤2-3生成的行人图像存储在行人图像数据库中；根据提供的失踪人员行人图像，生成该行人图像的两种模态，自适应地在行人图像数据库中检索失踪人员，若提供的失踪人员信息不是完整的全身照，甚至无法提供失踪人员的任何图像，可根据自然语言处理与生成对抗网络的方式，根据报案人员的描述，生成失踪人员的全身照，用该全身照作为失踪人员的行人图像完成检索；

根据图像所摄的摄像头所在位置、行人出现的时间，构建行程轨迹，行人出现在摄像头视野的时间内，摄像头会连续捕获该行人的行人图像，在摄像头捕获该行人图像的时间段内拥有起止时间，获取该行人于何时至何时在该摄像头处出现的轨迹信息，最终可以获取该行人在所有摄像头下出现的轨迹信息，形成完整的行程轨迹。

4.根据权利要求1-3任一项所述的应用于校园安防的全天候视频寻人方法，其特征在于，所述失踪人员实时监控指根据失踪人员的行人图像，与所有摄像头捕获的视频图像中提取出的行人图像匹配，具体的一轮失踪人员实时监控包括如下步骤：

步骤3-1：获取摄像头监控视频的一帧图像；

步骤3-2：将该帧图像进行行人检测，提取行人图像，每个行人的行人图像以摄像头编号、图像模态、时间、行人编号命名，行人图像存入实时行人图像集；

步骤3-3：将失踪人员的行人图像作为待查询行人图像，与步骤2-2中生成的实时行人图像集进行匹配，若匹配出相似度最高且达到指定阈值的行人图像，则将其作为疑似失踪人员处理，根据该行人图像捕获的时间与摄像头位置信息，向该位置就近的保安人员发送失踪人员的信息；否则清空实时行人图像集，完成一轮失踪人员实时监控。