[发明专利]一种融合遮挡场景的人脸识别方法、系统、设备及介质

权利要求书

1.一种融合遮挡场景的人脸识别方法，其特征在于，包括以下步骤：

根据无遮挡场景目标人脸的关键点信息和遮挡场景模板生成遮挡场景目标人脸；

基于无遮挡场景目标人脸和遮挡场景目标人脸生成融合遮挡场景的特征图；所述特征图生成过程，包括：在神经网络的浅层特征图中将无遮挡场景目标人脸、遮挡场景目标人脸分别划分为多个局部区域；对每个局部区域进行特征提取，通过激活函数输出对应的特征向量；将从每个局部区域获得的特征向量作为该局部区域的自学习权重，并在神经网络的深层特征图中加权融合所有局部区域的自学习权重，生成所述融合遮挡场景的特征图；

根据所述融合遮挡场景的特征图获取人脸特征，对待识别的无遮挡场景人脸或遮挡场景人脸进行人脸识别。

2.根据权利要求1所述的融合遮挡场景的人脸识别方法，其特征在于，对待识别的无遮挡场景人脸、遮挡场景人脸进行人脸识别，包括：

获取根据所述融合遮挡场景的特征图提取的人脸特征，对所述人脸特征进行分类并加入分类训练损失；

在无遮挡场景以及遮挡场景下训练进行分类且加入分类训练损失的人脸特征，生成融合遮挡场景的人脸识别模型；

根据所述融合遮挡场景的人脸识别模型对待识别的无遮挡场景人脸、遮挡场景人脸进行人脸识别。

3.根据权利要求1所述的融合遮挡场景的人脸识别方法，其特征在于，通过人脸检测算法对无遮挡场景目标人脸图片进行检测，获取目标人脸区域以及无遮挡场景目标人脸的关键点信息；

通过对齐算法将目标人脸区域中的五官对齐至固定区域，放缩无遮挡场景目标人脸至固定尺寸；并在固定尺寸下结合遮挡场景模板对无遮挡场景目标人脸进行数据增强，生成遮挡场景目标人脸。

4.根据权利要求1所述的融合遮挡场景的人脸识别方法，其特征在于，所述局部区域包括以下至少之一：上半脸、下半脸、左眼、右眼、鼻子、嘴巴。

5.根据权利要求1所述的融合遮挡场景的人脸识别方法，其特征在于，所述遮挡场景模板包括以下至少之一：口罩模板、墨镜模板；

遮挡场景目标人脸包括以下之一：口罩遮挡场景目标人脸、墨镜遮挡场景目标人脸。

6.根据权利要求5所述的融合遮挡场景的人脸识别方法，其特征在于，获取所述无遮挡场景目标人脸的关键点信息，根据鼻梁、脸颊、下巴的关键点位置生成口罩模板；并将所述口罩模板与所述无遮挡场景目标人脸进行贴合，生成所述口罩遮挡场景目标人脸；

根据眼角、鼻尖的关键点位置生成墨镜模板；并将所述墨镜模板与所述无遮挡场景目标人脸进行贴合，生成所述墨镜遮挡场景目标人脸。

7.根据权利要求1所述的融合遮挡场景的人脸识别方法，其特征在于，对所述神经网络的浅层特征图进行下采样，获得所述深层特征图。

8.一种融合遮挡场景的人脸识别系统，其特征在于，包括有：

遮挡场景人脸生成模块，用于根据无遮挡场景目标人脸的关键点信息和遮挡场景模板生成遮挡场景目标人脸；

场景融合模块，用于根据无遮挡场景目标人脸和遮挡场景目标人脸生成融合遮挡场景的特征图；

人脸识别模块，用于根据所述融合遮挡场景的特征图获取人脸特征，对待识别的无遮挡场景人脸、遮挡场景人脸进行人脸识别；

所述场景融合模块生成特征图的过程具体包括：

在神经网络的浅层特征图中分别将无遮挡场景目标人脸、遮挡场景目标人脸划分为多个局部区域；

对每个局部区域进行特征提取，通过激活函数输出对应的特征向量；

将从每个局部区域获得的特征向量作为该局部区域的自学习权重，并在神经网络的深层特征图中加权融合所有局部区域的自学习权重，生成所述融合遮挡场景的特征图。