[发明专利]图像处理方法和设备

权利要求书

1.一种图像处理方法，包括步骤：

在目标图像中定义包含去除对象的目标区域；

从与目标图像相关联的其他图像中提取至少一个子区域作为图 像栈，所述其他图像中均包含了与所述目标图像的拍摄视点不同的去 除对象；

基于利用能量最小技术的最优化方法逐个像素地从所述图像栈 中选择相应子区域的相同位置的像素来替换所述目标区域中的像素。

2.如权利要求1所述的图像处理方法，所述与目标图像关联的 其他图像是通过特征检测和匹配来从拍摄的一系列图像中确定的图 像集。

3.如权利要求1所述的图像处理方法，在对所述去除对象上的 像素进行替换后，还包括步骤：

通过梯度域融合来消除目标图像中被替换的像素与未替换的像 素之间的色调不一致。

4.如权利要求3所述的图像处理方法，还包括步骤：

通过特征检测和匹配来对准被替换了像素的区域的纹理和未替 换像素的区域的纹理。

5.如权利要求2所述的图像处理方法，所提取的子区域是通过 在所述相关图像集中的图像和所述目标图像之间进行特征检测和匹 配来从所述相关图像集中选择的。

6.如权利要求5所述的图像处理方法，还包括步骤：

将所述子区域中与所述目标图像最匹配的子区域与目标图像对 准；以及

将除最匹配的子区域之外的子区域与最匹配的子区域对准。

7.如权利要求6所述的图像处理方法，其中所述子区域由包含 去除对象的区域和该目标区域的部分周围区域组成。

8.如权利要求1所述的图像处理方法，在目标图像中定义目标 区域的步骤是指手动地定义目标图像中的去除对象。

9.如权利要求1所述的图像处理方法，在目标图像中定义去除 对象的步骤是指通过事先创建的检测模型来在目标图像中定义去除 对象。

10.一种图像处理设备，包括：

对象定义装置，在目标图像中定义包含去除对象的目标区域；

子区域提取装置，从与目标图像相关联的其他图像中提取至少一 个子区域作为图像栈，所述其他图像中包含了与所述目标图像的拍摄 视点不同的去除对象；

像素替换装置，基于利用能量最小技术的最优化方法逐个像素地 从所述图像栈中选择相应子区域的相同位置的像素来替换所述目标 区域中的像素。

11.如权利要求10所述的图像处理设备，还包括：

图像集确定装置，通过特征检测和匹配来从拍摄的一系列图像中 确定与目标图像相关的图像集，作为所述其他图像。

12.如权利要求10所述的图像处理设备，还包括：

纹理对准和融合装置，通过特征检测和匹配来对准所述像素替换 装置中被替换了像素的区域的纹理和未替换像素的区域的纹理，以及 通过梯度域融合来消除目标图像中被替换的像素与未替换的像素之 间的色调不一致。

13.如权利要求11所述的图像处理设备，还包括：

子区域选择装置，通过在所述相关图像集中的图像和所述目标图 像之间进行特征检测和匹配来从所述相关图像集中选择相应的子区 域。

14.如权利要求13所述的图像处理设备，所述子区域提取装置 将所述子区域中与所述目标图像最匹配的子区域与目标图像对准，以 及将除最匹配的子区域之外的子区域与最匹配的子区域对准。

15.如权利要求14所述的图像处理设备，其中所述子区域由包 含去除对象的目标区域和该区域的周围区域组成。

16.如权利要求10所述的图像处理设备，其中所述对象定义装 置允许用户手动地定义目标图像中去除对象。

17.如权利要求10所述的图像处理设备，其中所述对象定义装 置通过事先创建的检测模型来在目标图像中定义去除对象。