[发明专利]一种基于视频流的人脸追踪与识别的系统及方法

权利要求书

1.一种基于视频流的人脸追踪与识别的系统，其特征在于：包括红外人体传感器、摄像头和识别单元，所述识别单元用于控制人脸识别和追踪，所述识别单元包括人脸检测模块、人脸追踪模块、人脸识别模块、人脸特征数据库和识别记录库，所述摄像头通过USB连接线和识别单元连接，用于将人员画面信息发送给识别单元；所述红外人体检测器通过GPIO接口与识别单元连接，用于将有行人信号发送给识别单元；所述人脸检测模块与人脸追踪模块相连，用于人脸坐标信息传递给人脸追踪模块；所述人脸追踪模块与人脸识别模块连接，用于将追踪的人脸特征信息传递给人脸检测识别模块，所述人脸识别模块还分别与人脸特征数据库和用于存储识别信息的识别记录库连接，用于与人脸特征数据库内人脸特征提取与相似度比较。

2.一种基于视频流的人脸追踪与识别的方法，包括以下步骤：

（1）当有人体进入红外人体传感器范围内时，传感器将信号发送至识别单元，控制识别单元启动视频显示，并启动人脸检测模块，若在特定时间内没有检测到人脸信息，则系统再次进入休眠状态，关闭视频显示，挂起人脸检测模块；

（2）人脸检测模块从摄像头记录的视频帧中检测到人脸时，使用opencv在视频帧中绘制矩形框将人脸框出，并提取人脸坐标信息与人脸倾斜角度信息，所述人脸坐标信息包括矩形框的左上角坐标、右下角坐标和人脸中心坐标，提取完毕后传递给人脸追踪模块，当人脸检测模块检测到人脸移动至占用视频帧尺寸的70%时，启动人脸追踪模块；

（3）人脸追踪模块调用人脸检测算法判断人脸检测模块传过来的人脸坐标信息是否有效，若坐标信息有效，每隔特定的帧间隔持续调用人脸检测算法重新获取当前人脸的坐标信息，并与之前的坐标信息进行对比，并通过定位人脸中心坐标D(X,Y)的移动速度确保对单个人脸的长时间追踪，在获得特定帧间隔的人脸位置移动数据之后，采用平滑过渡的方式，将矩形框移动至人脸所在位置；

（4）当进入人脸追踪模式后，系统会记录下人脸的驻留时间，并根据驻留时间的长短调用人脸识别模块，进行人脸识别；

（5）人脸识别模块根据人脸追踪模块提供的人脸位置信息与倾斜角度信息，调用人脸识别算法抽取人脸特征值，并与人脸特征数据库中的特征进行相似度比较并选取相似度最高的结果来判断是否将人员信息传递给人脸追踪模块；若该结果的相似度数值大于特定阈值，则判定为识别成功，将人员信息传递给人脸追踪模块，人脸追踪模块继续追踪的同时，将人员信息显示在矩形框之上，标记该人脸所属的人员信息与类型，若结果的相似度数值小于该阈值，则判定为识别失败，此时不提交任何结果给人脸追踪模块；

（6）若人脸识别成功，则将该人员的本次识别情况存入识别记录库中，并完成识别任务，若人脸追踪模块在长时间内都没有能够获取到特定人脸的人员信息，则判定为该人员未在该系统内注册，属于陌生人员，系统将截取人员图片，并存入识别记录中，以备审查。

3.根据权利要求2所述的一种基于视频流的人脸追踪与识别的方法，其特征在于：所述步骤（2）中视频帧尺寸的70%的范围计算公式为：左上角坐标：((3/20)*l,(17/20)*w)，右下角坐标：((17/20)*l,(3/20)*w)，其中l为视频帧的长，w为视频帧的宽。

4.根据权利要求2所述的一种基于视频流的人脸追踪与识别的方法，其特征在于：所述步骤（3）中的人脸中心座标D(X,Y)的计算公式为D(X,Y) = (( eyeleft.x + eyeright.x)/2,( eyeleft.y + eyeright.y )/2)，其中eyeleft.x为左眼位置的横坐标，eyeleft.y为左眼位置的纵坐标，eyeright.x为右眼位置的横坐标，eyeright.y为右眼位置的纵坐标。

5.根据权利要求2所述的一种基于视频流的人脸追踪与识别的方法，其特征在于：所述步骤（3）中通过定位人脸中心坐标D(X,Y)的移动速度确保对单个人脸的长时间追踪的方法为：根据人脸中心坐标D的相对位置变化以及帧间隔的时间来确定人脸移动速度，若移动速度在阈值之内，则将此次移动判定为同一人脸的正常移动，若人脸移动速度超过设定阈值，则表明可能出现其他干扰因素，判断为无效数据，中止人脸追踪。