[发明专利]基于多摄像头抓拍图像的融合去重方法、装置及可读介质

说明书

本发明公开了一种基于多摄像头抓拍图像的融合去重方法、装置及可读介质，通过获取采集分别设置于通道周围的多个摄像头所抓拍的图像，从每个摄像头所抓拍的图像分别识别出人头图像、人脸图像和人体图像，并得到人脸图像对应的质量分数；基于每个摄像头所获取的人头图像进行人头跟踪得到人头轨迹，根据人头轨迹中的同一人在通道的人员备选区和人员确认区所出现的先后次序确定通过通道的主体人员；基于主体人员及其人头轨迹获取每个摄像头下的主体人员的最佳人体图像和最佳人脸图像；通过ReID算法将所有摄像头所抓拍的主体人员的最佳人体图像进行去重合并，确定目标人员，基于目标人员的最佳人脸图像的质量分数确定目标人脸图像，提高抓拍的准确度。

技术领域

本发明涉及计算机视觉领域，具体涉及一种基于多摄像头抓拍图像的融合去重方法、装置及可读介质。

背景技术

在机场/高铁站等安检门前的安检通道，博物馆/图书馆/音乐厅等固定集会场所的安检门通道，灯会音乐节等临时场地的安检门。人员经过这些安检通道时，如有安保需求，要求记录人脸或人体图像。随着安保等级的增加，在机场/铁路等场景下旅客需要核验身份。在旅客经过行李安检通道时，需要识别每个旅客的身份，并对有提示的人员重点关注。

旅客会在行李安检通道卸行李，并经过安检门。在这个过程中，需要抓拍每个旅客脸，并识别有无重点人员。在此过程中单个摄像头存在以下两种抓拍方式并存在以下问题：

1.俯视抓拍：

单个摄像头安置在安检门顶部，不得不采用俯视视角拍摄经过安检门的人。然而人身高不合适或低头经过门时，俯视视角很难获得易于识别的脸，带来大量漏识别。同时，顶部摄像头影响美观，并给旅客带来负面情绪。

2.侧视抓拍：

单个摄像头放在通道侧面，在旅客卸包处后方对视卸行李旅客，在旅客卸行李时抓拍。然而，旅客卸行李时往往低头，目前侧装的方案存在大量漏抓。对身高低或高的旅客，抓拍效果也不佳。

现有技术中人脸检测大多采用分段完成的方式，先检测出人脸，再估计人脸的角度，选取正脸识别。因此该过程比较繁琐，效率比较低。

发明内容

针对上述提到的单个摄像头抓拍存在漏识别或抓拍效果不佳等技术问题。本申请的实施例的目的在于提出了一种基于多摄像头抓拍图像的融合去重方法、装置及可读介质，来解决以上背景技术部分提到的技术问题。

第一方面，本申请的实施例提供了一种基于多摄像头抓拍图像的融合去重方法，包括以下步骤：

S1，获取采集分别设置于通道周围的多个摄像头所抓拍的图像，从每个摄像头所抓拍的图像分别识别出人头图像、人脸图像和人体图像，并得到人脸图像对应的质量分数，质量分数基于人脸的俯仰角度、翻滚角度和偏航角度确定；

S2，基于每个摄像头所获取的人头图像进行人头跟踪得到人头轨迹，根据人头轨迹中的同一人在通道的人员备选区和人员确认区所出现的先后次序确定通过通道的主体人员；

S3，基于主体人员及其人头轨迹获取每个摄像头所抓拍的主体人员的最佳人体图像和最佳人脸图像；

S4，通过ReID算法将所有摄像头所抓拍的主体人员的最佳人体图像进行去重合并，确定目标人员，基于目标人员对应的最佳人脸图像的质量分数确定目标人脸图像。

在具体的实施例中，步骤S1中还包括：

构建标准3D人脸关键点模型，并对标准3D人脸关键点模型进行偏转以获得俯仰角度、翻滚角度和偏航角度及其对应的人脸关键点的图像2D平面坐标，并建立基于图像2D平面坐标到俯仰角度、翻滚角度和偏航角度的回归模型。