[发明专利]图像处理方法和设备

权利要求书

1.一种图像处理方法，包括：

使用至少一个输入视图产生关于参考视点的参考层；

使用所述至少一个输入视图产生输出视点图像；

使用参考层执行针对输出视点图像内的空洞的空洞恢复。

2.如权利要求1所述的方法，其中，每个输入视图包括图像和视差信息，参考层包括参考层的图像和参考层的视差信息。

3.如权利要求1所述的方法，其中：

所述至少一个输入视图包括左输入视图和右输入视图；

参考视点包括左输入视图的视点与右输入视图的视点之间的视点。

4.如权利要求1所述的方法，其中，参考视点包括所述至少一个输入视图中的中心输入视图的视点。

5.如权利要求1所述的方法，其中，产生参考层的步骤包括：

使用所述至少一个输入视图产生参考视点图像和参考视点视差信息；

产生关于参考视点的空洞图，其中，在所述空洞图中，与每个输出视点图像内的空洞相关的信息被收集；

使用空洞图、参考视点图像和参考视点视差信息来产生初始参考层；

通过执行针对初始参考层内的空洞的空洞恢复来产生参考层。

6.如权利要求5所述的方法，其中，基于包括在参考视点图像中的像素的视差之间的差来产生空洞图。

7.如权利要求5所述的方法，其中，通过在参考视点图像和空洞图之间执行AND运算来产生初始参考层的图像。

8.如权利要求5所述的方法，其中，使用与初始参考层内的空洞邻近的背景来执行针对初始参考层内的空洞的空洞恢复。

9.如权利要求5所述的方法，其中：

当第一像素的第一视差比与第一像素的左侧邻近的第二像素的第二视差至少大第一阈值时，从第一像素的右侧起的像素被设置为空洞，并且所述像素的数量与第一视差和第二视差之间的差成比例；

当第一像素的第一视差比与第一像素的右侧邻近的第三像素的第三视差至少大第二阈值时，从第一像素的左侧起的像素被设置为空洞，并且所述像素的数量与第一视差和第三视差之间的差成比例。

10.如权利要求2所述的方法，其中，产生输出视点图像的步骤包括：

从所述至少一个输入视图选择至少一个参考视图；

通过使用参考视图视差信息将参考视图图像扭曲至输出视点，来产生输出视点图像；

其中，执行空洞恢复的步骤包括：

通过使用参考层的视差信息将参考层图像扭曲至输出视点，来产生输出视点的参考层图像；

将与输出视点的参考层图像中的空洞对应的区域复制到所述空洞。

11.如权利要求1所述的方法，其中，提供多个输出视点图像。

12.一种图像处理设备，包括：

参考层产生器，用于使用至少一个输入视图产生关于参考视点的参考层；

输出视点图像产生器，用于使用所述至少一个输入视图产生输出视点图像；

空洞恢复单元，用于使用参考层执行针对输出视点图像内的空洞的空洞恢复。

13.如权利要求12所述的图像处理设备，其中，每个输入视图包括图像和视差信息，参考层包括参考层的图像和参考层的视差信息。

14.如权利要求12所述的图像处理设备，其中：

所述至少一个输入视图包括左输入视图和右输入视图；

参考视点包括左输入视图的视点与右输入视图的视点之间的视点。

15.如权利要求12所述的图像处理设备，其中，参考视点包括所述至少一个输入视图中的中心输入视图的视点。

16.如权利要求12所述的图像处理设备，其中，参考层产生器包括：

参考视点图像/视差信息产生器，用于使用所述至少一个输入视图产生参考视点图像和参考视点视差信息；

空洞图产生器，用于产生关于参考视点的空洞图，其中，在所述空洞图中，与每个输出视点图像内的空洞相关的信息被收集；

初始参考层产生器，用于使用空洞图、参考视点图像和参考视点视差信息来产生初始参考层；

参考层产生器，用于通过执行针对初始参考层内的空洞的空洞恢复来产生参考层。