[发明专利]虹膜人脸多模态活体检测和识别方法、装置、介质及设备

权利要求书

1.一种虹膜人脸多模态活体检测方法，其特征在于，所述方法包括：

获取由人脸镜头和虹膜镜头在多个采集位置采集的多幅人脸图像和多幅虹膜图像；并在判断多幅人脸图像均为同一张人脸的情况下，将多幅虹膜图像拼接在一起得到拼接图像；分别使用多幅人脸图像中的至少一幅、多幅虹膜图像中的至少一幅以及拼接图像进行多步活体检测，若所述多步活体检测均通过，则虹膜人脸多模态活体检测通过。

2.根据权利要求1所述的虹膜人脸多模态活体检测方法，其特征在于，所述获取由人脸镜头和虹膜镜头在多个采集位置采集的多幅人脸图像和多幅虹膜图像；并在判断多幅人脸图像均为同一张人脸的情况下，将多幅虹膜图像拼接在一起得到拼接图像；分别使用多幅人脸图像中的至少一幅、多幅虹膜图像中的至少一幅以及拼接图像进行多步活体检测，若所述多步活体检测均通过，则虹膜人脸多模态活体检测通过，包括：

获取由同时安装在旋转云台上的所述人脸镜头和虹膜镜头在目标采集位置同时采集的第一人脸图像和第一虹膜图像；

使用所述第一人脸图像和第一虹膜图像进行第一步活体检测；

在第一虹膜图像上提取出虹膜区域，并使用所述虹膜区域进行第二步活体检测；

获取旋转云台旋转到目标采集位置外的其他采集位置时由人脸镜头和虹膜镜头同时采集的至少一幅第二人脸图像和至少一幅第二虹膜图像，并且所述其他采集位置保证采集的所有第二虹膜图像与所述第一虹膜图像拼接后能够构成完整的人脸；

在判断第一人脸图像和每幅第二人脸图像均为同一张人脸的情况下，将所有第二虹膜图像与所述第一虹膜图像拼接在一起，得到包含完整近红外人脸的拼接图像；

使用所述拼接图像进行第三步活体检测；

其中，若所述第一步活体检测、第二步活体检测和第三步活体检测均通过，则虹膜人脸多模态活体检测通过。

3.根据权利要求2所述的虹膜人脸多模态活体检测方法，其特征在于，所述将所有第二虹膜图像与所述第一虹膜图像拼接在一起，得到包含完整近红外人脸的拼接图像，包括：

提取第一虹膜图像和第二虹膜图像的特征点，并统计第一虹膜图像和第二虹膜图像的相同位置的特征点；

根据所述相同位置的特征点将第一虹膜图像和第二虹膜图像进行图像配准，找到第一虹膜图像和第二虹膜图像中的重叠区域；

将所述重叠区域进行融合，得到包含完整近红外人脸的拼接图像。

4.根据权利要求2所述的虹膜人脸多模态活体检测方法，其特征在于，所述将所有第二虹膜图像与所述第一虹膜图像拼接在一起，得到包含完整近红外人脸的拼接图像，包括：

提取第一人脸图像和/或第二人脸图像的特征点，并提取第一虹膜图像和第二虹膜图像的特征点；

根据第一虹膜图像和第二虹膜图像的特征点以及第一人脸图像和/或第二人脸图像的相同位置的特征点对所述第一虹膜图像和第二虹膜图像进行图像配准；

若图像配准后的第一虹膜图像和第二虹膜图像有重叠区域，则将所述重叠区域进行融合，得到包含完整近红外人脸的拼接图像。

5.根据权利要求1-4任一所述的虹膜人脸多模态活体检测方法，其特征在于，所述获取由同时安装在旋转云台上的所述人脸镜头和虹膜镜头在目标采集位置同时采集的第一人脸图像和第一虹膜图像，包括：

获取由人脸镜头采集的前置人脸图像；

对所述前置人脸图像进行人眼定位获得人眼坐标，根据所述人眼坐标与目标采集位置的人眼参考坐标计算所述旋转云台的第一转动角度，并使得所述旋转云台根据第一转动角度进行转动；

获取当所述旋转云台根据所述第一转动角度旋转时由虹膜镜头采集的前置虹膜图像；

对所述前置虹膜图像进行虹膜定位获得虹膜坐标，根据所述虹膜坐标与目标采集位置的虹膜参考坐标计算所述旋转云台的第二转动角度，并使得所述旋转云台根据第二转动角度进行转动；

获取当所述旋转云台根据所述第二转动角度旋转到目标采集位置时由人脸镜头和虹膜镜头同时分别采集的第一人脸图像和第一虹膜图像。