[发明专利]全局上下文先验约束的抗遮挡人脸超分辨率方法及其系统

说明书

本发明公开了全局上下文先验约束的抗遮挡人脸超分辨率方法及其系统，包括：S1：构建高低分辨率训练库；S2：采用相同的分块方式将待处理低分辨率人脸图像和训练库中图像划分为具交叠部分的图像块；S3：为高分辨率人脸图像库中每一个人脸图像块位置计算其与其他人脸图像块位置的关联度；S4：关联度删减模块，将弱关联度的连接全部去掉留下关联度高的指定数目的连接；S5：对待处理低分辨率人脸图像的每一个块位置做遍历和预处理，判断每个待处理块的遮挡程度；S6：恢复每一个无遮挡待处理图像块；S7：恢复每一个有遮挡待处理图像块；S8：拼接高分辨率人脸图像块。本发明可显著提高恢复图像的视觉感受，特别适用于低质量监控环境下人脸图像的恢复。

技术领域

本发明涉及图像处理和图像恢复技术领域，尤其涉及基于全局上下文先验约束的抗遮挡人脸超分辨率方法及系统。

背景技术

人脸超分辨率技术是通过辅助训练库，学习高低分辨率对应关系，进而达到从已有的低分辨率人脸图像中估计出高分辨率人脸图像的目的。人脸超分辨率现在被广泛应用于多个领域，其中最具代表性的领域之一就是监控录像中的人脸图像增强。随着监控系统的广泛普及，监控视频在刑事取证和刑侦调查过程中发挥着越来越重要的作用。而人脸图像作为直接证据之一，在案件分析和法庭取证中占据着重要的位置。然而，由于图像捕获环境的限制，以监控环境为代表的实际条件中，目标嫌疑人的人脸有效像素低下，导致辨识过程和图像增强过程难度系数大大增加，因此需采用人脸超分辨率技术提升图像有效尺寸和有效分辨率，达到从低分辨率图像恢复到高分辨率图像的目的。

近年来，流形学习成为了人脸超分辨率的经典算法之一。这类方法的核心思想是：对高低分辨率两个样本空间，寻找出每个低分辨率图像数据点周围的局部性质，然后将低分辨率图像的流形局部性质非线性地映射到高分辨率图像的流形空间中，在高分辨率对应空间上做投影，从而合成高分辨图像。具有代表性的有以下几种方法：2004年，Chang[1]等首次将流形学习法引入图像超分辨率重构中，提出了一种邻域嵌入的图像超分辨率重构法。Sung Won Park[2]提出一种基于局部保持投影的自适应流形学习方法，从局部子流形分析人脸的内在特征，重构出低分辨率图像缺失的高频成分。2010年，Huang[7]提出基于CCA(Canonical Correlation Analysis，CCA)的方法，通过将全局PCA(PrincipalComponent Analysis，PCA)空间延伸至CCA空间，进一步解决了这个问题。2014年，Dong[4]针对监控环境下严重的模糊和噪声导致的图像像素损毁严重的问题，提出将PCA模型从全局聚焦于局部人脸结构上，约束人脸超分辨率的局部重建效果。Hui[5]等人提出，基于像素级的分布经验建模人脸局部结构，通过上下文的像素局部结构重建目标局部块。2016年，Kim[6]等人提出，采用深度学习的思想建模超分辨率的精细局部细节，为细节重建提供思路。

综上所述，现有的这些方法大多仅按照传统的技术思路以常用的数学模型或者局部人脸结构模型为待处理图像提供重建框架，忽略了在低质量图像中也能保存较为完整的局部结构之间的全局性关联信息。因此虽然在重建一般环境下低质量图像的过程中，可以得到不错的效果，但是面对以监控为代表的严重噪声图像时，高频细节的损毁导致了这种以高频细节为主要考虑对象距离度量准则不再精确，严重影响了局部关系描述的精准程度，图像本身的子空间信息因此很容易遭到损坏，用传统方法恢复出来的图像，效果并不令人满意。

发明内容

本发明的目的在于提供基于全局上下文先验约束的抗遮挡人脸超分辨率方法及系统。

本发明采用的技术方案是：

基于全局上下文先验约束的抗遮挡人脸超分辨率方法，其包括以下步骤：

S1：构建包含高分辨率人脸图像库及其对应的低分辨率人脸图像库的训练库；

S2：采用相同的分块方式将待处理低分辨率人脸图像、以及训练库中图像划分为具交叠部分的图像块，所述图像块为边长为bb的正方形图像块；