[发明专利]基于深度信息的多视点图像超分辨方法

摘要

本发明提供一种基于深度信息的多视点图像超分辨方法，主要解决现有技术对低分辨率视点图像进行超分辨重建时的边缘伪影现象。其实现过程为：根据针孔相机模型，利用深度信息和相关相机参数，采用后向投影法将视点k的高分辨率彩色图映射到视点n的图像位置上；对投影图像进行基于深度差和色度差的联合视点间像素映射关系的有效性检测，仅保留符合有效性检测的像素点，为避免不同视点间亮度不同的影响预先对视点k的彩色图进行亮度调整；分离出投影图像的高频信息，与视点n的低分辨率彩色图上采样后的图像相加，得到视点n的超分辨率重建图像。本发明在对低分辨率视点进行超分辨重建时可以有效减轻边缘伪影现象，提高超分辨重建图像的质量。

主权项

一种基于深度信息的多视点图像超分辨方法，该方法采用基于深度和色度的联合视点间像素映射关系的有效性检测，以消除边缘伪影现象，该方法包括以下步骤：1)分别输入低分辨率视点视点n的深度图D_n和低分辨率彩色图高分辨率视点视点k的深度图D_k和高分辨率彩色图V_k；2)对视点n的低分辨率彩色图进行上采样，得到其低频成分图像3)对视点k的高分辨率彩色图V_k先后进行下采样和上采样，得到其低频成分图像4)在视点n和视点k间进行视点映射，并进行基于深度差的视点间像素映射关系的有效性检测，将投影到视点n的图像位置上，得到投影图像5)将投影图像与视点n的低频成分图像进行亮度对比，以此调整视点k的高分辨率彩色图V_k的图像亮度，得到亮度调整后的图像V′_k；6)将亮度调整后的图像V′_k先后进行下采样和上采样，得到其低频成分图像7)在步骤4)的投影结果的基础上进行基于亮度差的视点间像素映射关系的有效性检测，将V′_k投影到视点n的图像位置上，得到V_n|k；8)分离出投影图像V_n|k的高频成分图像9)对高频成分图像和低频成分图像进行求和，得到视点n的高分辨重建图像