[发明专利]一种填补图像空洞的方法及其装置

摘要

本发明的目的在于公开了一种填补图像空洞的方法及其装置，通过利用视频帧序列中的欲处理目标帧和其对应的一张深度图进行图像渲染，在渲染过程中对产生的大小空洞分别进行处理，先处理小的空洞，再利用从余下视频帧序列中，寻找与所要处理的大空洞最佳匹配的像素块的方法，对大空洞进行处理，大大增强了空洞的填补效果。

主权项

一种填补图像空洞的方法，其特征在于步骤如下：S1，在待处理的视频帧序列及各帧对应的深度图中，将欲处理的目标帧作为第一视图，并选出该第一视图对应的深度图；S2，由第一视图及其对应的深度图利用图像渲染算法，对欲求的虚拟视点图像进行渲染，得到第二视图；S3：根据预设阈值，对第二视图中所述空洞的大小进行划分，将第二视图中规模小于所设阈值的空洞视为是由量化误差造成的，称为小空洞，并对小空洞进行填补；S4：根据预设阈值，将第二视图中规模大于所设阈值的空洞视为因场景点遮挡而产生的空洞，称为大空洞，并根据该大空洞内部像素的取值范围及在该大空洞边缘之外取预设个数的像素点，确定出该大空洞在第二视图中的位置；S5：在除第一视图对应的深度图之外的，余下的各帧对应的深度图中，寻找与第二视图中的大空洞所在位置相同的像素块；S6：对步骤S5中获取的像素块的像素值进行求和处理，找出其中和值最小的像素块所属的深度图，并根据该深度图确定出它对应的那个视频帧，将该视频帧记为第三视图；S7：在所述第三视图中，取出与第二视图中的大空洞位置和大小均相同的像素块，将在第三视图中取到的像素块复制并填补到第二视图中的大空洞处，即根据步骤S4中所确定的第二视图中组成大空洞的各像素点的位置坐标一一对应到所述第三视图中的同样位置坐标处，并在所述的第三视图中，以这些坐标为取值依据，逐一取出这些对应坐标处的像素值，然后再将这些像素值，逐一复制到第二视图中大空洞上相同的位置坐标处，从而填补了第二视图中的大空洞。