[发明专利]深度图修复方法、装置和可读存储介质

说明书

本发明实施例提供一种深度图修复方法、装置和可读存储介质，所述深度图修复方法包括：基于原始深度图获取空洞区域集；对原始彩色图分别进行全局分割与局部分割，获得彩色分割区域集；其中，所述彩色分割区域集用于对所述空洞区域集进行处理，以获取待修复空洞区域集；所述原始深度图和所述原始彩色图包括同一人脸；计算所述待修复空洞区域集中各空洞像素点的深度修复值，对所述原始深度图进行修复。基于彩色图的引导对深度图进行修复，在保证深度图整体修复效果的基础上，进一步提升了修复的真实性和可靠性，能够满足当前人脸识别检测应用对深度图像质量日益提高的要求。

技术领域

本发明涉及图像处理技术领域，尤其涉及一种深度图修复方法、装置和可读存储介质。

背景技术

深度感知成像技术一直以来都是计算机视觉技术领域中一门重要的研究课题，目前包括基于空间编码结构光的单目深度成像技术、基于结构光纹理增强的双目深度成像技术和基于飞行时间的单目深度成像技术等主流方向，广泛应用在医学、工业、消费电子、安防监控等领域中。人脸识别应用作为安防监控和消费电子领域中的关键技术，随着近几年深度学习技术的发展，逐渐从使用彩色图像或红外图像等二维数据，过渡到使用深度图像等三维数据进行人脸的识别检测。因而由深度感知成像技术获取的深度图像质量对人脸识别应用效果的具有极为关键的影响。虽然目前主流的深度感知技术获取的深度图质量都可以达到较高水平，但是通用修复方法对人脸区域的修复效果有限，无法满足当前人脸识别应用对深度图像质量日益提高的要求。

发明内容

针对现有技术存在的上述技术问题，本发明实施例提供一种深度图修复方法、装置和可读存储介质。

第一方面，本发明实施例提供一种深度图修复方法，包括：

基于原始深度图获取空洞区域集；

对原始彩色图分别进行全局分割与局部分割，获得彩色分割区域集；其中，所述彩色分割区域集用于对所述空洞区域集进行处理，以获取待修复空洞区域集；所述原始深度图和所述原始彩色图包括同一人脸；

计算所述待修复空洞区域集中各空洞像素点的深度修复值，对所述原始深度图进行修复。

可选地，所述对原始彩色图分别进行全局分割与局部分割，获得彩色分割区域集，包括：

对所述原始彩色图进行全局分割，获得全局分割结果；其中，所述全局分割结果包括人脸轮廓彩色分割区域和五官彩色分割区域；

对所述原始彩色图进行局部分割，获得局部分割结果；其中，所述局部分割结果包括眼镜框架彩色分割区域、鼻侧阴影彩色分割区域和嘴部口腔彩色分割区域；

将所述全局分割结果与所述局部分割结果进行图像融合，获得多个彩色分割区域；

可选地，所述对原始彩色图分别进行全局分割与局部分割，获得彩色分割区域集之后，还包括：

对所述多个彩色分割区域集进行筛选，剔除像素值小于预设像素阈值的彩色分割区域；基于筛选后的各彩色分割区域的像素值，对所述筛选后的多个彩色分割区域进行标记，获取第一标记结果。

可选地，所述彩色分割区域集用于对所述空洞区域集进行处理，以获取待修复空洞区域集，包括：

对所述空洞区域集进行连通域标记，获取第二标记结果；其中，所述空洞区域集为原始深度图中像素值为零的像素点的集合；

基于所述第一标记结果和所述第二标记结果，判断所述空洞区域集中各空洞区域内的各像素点是否属于同一彩色分割区域，获取第三标记结果；

其中，若所述空洞区域集中各空洞区域内的各像素点属于同一彩色分割区域，则对所述各像素点给予相同的标记；若所述空洞区域集中各空洞区域内的各像素点不属于同一彩色分割区域，则对所述各像素点分别给予不同的标记；