[发明专利]一种基于动态机器视觉的营业厅客流计数方法及设备

权利要求书

1.一种基于动态机器视觉的营业厅客流计数设备，用于对场所内的客流进行计数统计，其特征在于，包括上位机、动态机器视觉检测系统、可进行俯仰轴转动、偏航轴转动和翻滚轴转动的可变云台，在可变云台上设置有图像采集器，所述图像采集器的采集端为可变倍、变焦和变光圈的可变镜头；

所述动态视觉检测系统分别与所述可变云台、可变镜头以及上位机连接。

2.一种基于动态机器视觉的营业厅客流计数方法，基于权利要求1所述的一种基于动态机器视觉的营业厅客流计数设备，用于对场所内的客流进行计数统计，其特征在于，包括以下步骤：

步骤1：使用图像采集器进行图像采集；

步骤2：根据采集到的图像进行可变云台的姿态调整和可变镜头的调整；

步骤3：使用采集的图像进行人脸识别、人体识别；然后对识别到的人脸和人体采用人脸和人体匹配算法进行匹配；然后采用跟踪算法对匹配了人脸和人体的目标进行跟踪；

步骤4：根据步骤3的识别情况对可变云台的姿态进行再次调整，以及对可变镜头进行再次调整；调整后再次对图像数据进行步骤3的处理；

步骤5：根据持续跟踪和识别的结果进行数据的汇总，得出最终的客流计数。

3.如权利要求2所述的一种基于动态机器视觉的营业厅客流计数方法，其特征在于，所述步骤2的具体操作为：

步骤2.1：在连续帧的图像中，对于监测到的目标物体匹配有外接矩形框，将外接矩形框的中心点逐渐往画面的中心位置移动，直至目标物体位于采集的图像的中心；

步骤2.2：当目标物体进入采集的图像的中心后，设置外接矩形框占比阈值，当目标物体的外接矩形框占整个画面的比例低于外接矩形框占比阈值时，对可变镜头进行变焦并改变视角。

4.如权利要求2所述的一种基于动态机器视觉的营业厅客流计数方法，其特征在于，所述步骤3的具体操作包括：

步骤3.1：使用采集的图像进行人脸识别、人体识别；然后对识别到的人脸和人体采用人脸和人体匹配算法进行匹配，得到得到当前图像中包含p个元素的行人检测框集合p_boxes；

步骤3.2：对行人检测框集合p_boxes中的每个元素采用跟踪算法进行跟踪，得到跟踪器集合p_trackers，跟踪器集合p_trackers中的每个跟踪器中也包含针对当前外接矩形框的置信度；

步骤3.3：设置跟踪队列，将每个跟踪器产生的每一个目标id所对应的特征向量保存到跟踪列表中；然后在每次处理新的一帧图像的时候，通过人脸和人体匹配算法来判断当前帧中的目标id为当前中已有的目标或新出现的目标；

步骤3.4：用行人检测框集合p_boxes中的每个外接矩形框截取相应的原图区域作为人脸检测的输入数据，运行p次人脸检测模型，得到检测结果集合；然后取每次检测结果集合中置信度最大的人脸检测结果，得到p个人脸位置和置信度集合p_faces，人脸位置和置信度集合p_faces中可能包含空元素，即表示未在外接矩形框中检测到人脸；

步骤3.5：遍历人脸位置和置信度集合p_faces，对人脸位置和置信度集合p_faces中置信度大于阈值的元素进行人脸识别，得到人脸ID，实现对当前用户的计数。

5.如权利要求4所述的一种基于动态机器视觉的营业厅客流计数方法，其特征在于，所述步骤4的具体操作为：

对于步骤3.5中，人脸位置和置信度集合p_faces中置信度未大于阈值的元素，调整可变云台的姿态并对可变镜头进行调整；调整后再次对对应元素进行图像采集，然后对采集到的图像进行步骤3的操作。