[发明专利]一种多摄像头行人轨迹聚合系统和方法

权利要求书

1.一种多摄像头行人轨迹聚合系统，其特征在于，包括前端装置和聚合服务器；所述前端装置通过网络连接有若干摄像头；所述聚合服务器通过网络连接若干前端装置；所述前端装置包括视频流接收装置、行人检测装置、行人追踪装置、行人定位装置以及轨迹发送装置；所述聚合服务器包括轨迹接收装置、轨迹筛选装置、特征匹配装置、轨迹融合装置和轨迹存储装置；

所述视频流接收装置用于接收所连接摄像头的视频流数据；

所述行人检测装置用于通过行人的目标检测在所接收的视频流数据的视频流帧图像中确定目标行人；

所述行人追踪装置用于根据所确定的目标行人在视频流数据中进行多目标追踪，追踪所述目标行人的图像位置和特征数据，并通过对目标行人的深度估计追踪所述目标行人的深度数据；

所述行人定位装置用于根据所述目标行人的图像位置和深度数据，结合摄像头位置信息计算出所述目标行人的地理位置；

所述轨迹发送装置用于将摄像头信息和目标行人的特征数据、地理位置组成行人轨迹数据向所述聚合服务器发送；

所述轨迹接收装置用于接收所述前端装置所发送的行人轨迹数据；

所述轨迹筛选装置用于根据所接收行人轨迹数据所确定的时间和位置范围，从轨迹数据库中选取行人轨迹数据，通过对所接收的行人轨迹数据和所选取的行人轨迹数据是否符合轨迹时空连续性对所选取的行人轨迹数据进行筛选；

所述特征匹配装置用于对所接收的行人轨迹数据和所筛选到的行人轨迹数据中的目标行人特征数据进行相似度匹配；

所述轨迹聚合装置用于根据相似度匹配的结果，对所接收的行人轨迹数据和所匹配到的行人轨迹数据进行融合；

所述轨迹存储装置用于将聚合得到的行人轨迹数据存入轨迹数据库。

2.如权利要求1所述的多摄像头行人轨迹聚合系统，其特征在于，所述前端装置还包括背景分析装置和视频流缓存装置；所述背景分析装置用于通过对视频流数据进行分析得到背景图像；所述视频流缓存装置用于缓存所接收的视频流数据；所述行人追踪装置在当所述行人检测装置确定新的目标行人时，基于背景图像对所缓存的视频流数据进行前向追踪。

3.如权利要求2所述的多摄像头行人轨迹聚合系统，其特征在于，所述前端装置还包括缓存清理装置；所述缓存清理装置用于跟踪时间T1内所确定的目标行人，通过所述行人追踪装置对所缓存的视频流数据的前向追踪，判断这些目标行人在所缓存的视频流数据中都不存在的时间点T2，然后在所缓存的视频流数据中将时间点T2之前的视频流数据清除。

4.如权利要求1所述的多摄像头行人轨迹聚合系统，其特征在于，所述前端装置还包括人脸特征提取装置；所述人脸特征提取装置用于跟踪所确定的目标行人在视频流数据中的人脸并提取人脸特征数据；所述目标行人的特征数据包括人脸特征数据；所述特征匹配装置进行相似度匹配时，将相似度匹配的结果分成有第一类型和第二类型；所述第一类型表示相似度匹配的结果未包含人脸特征数据；所述第二类型表示相似度匹配的结果包含有人脸特征数据；所述轨迹聚合装置中，对于第一类型则将所接收的行人轨迹数据作为有向图的节点加入至所匹配的行人轨迹数据，对于第二类型则将所接收的行人轨迹数据以合并的方式加入至所匹配的行人轨迹数据；当所接收的行人轨迹数据作为有向图的节点加入至所匹配的行人轨迹数据时，以相似度值作为有向图的边的可信度参数。