[发明专利]自动移除全景图像中三脚架残留影像的方法和装置

说明书

技术领域

本发明涉及一种图像处理方法和装置，尤其涉及将全景图像中出现的三脚架残留影像进行自动化移除的方法和装置。

背景技术

在全景图像拍摄时，经常会在全景图像中不可避免的出现不希望保存的三脚架残留影像，这就会对用户的视觉感受带来很大的损失。现有的处理方法是通过手动移除来完成，具体方式是在需要去除的局部影像中，通过图像编辑工具，手动抠图的方式，对三脚架残留影像区域进行修复。这种操作方式极大耗费人力。增加了后期处理的负担。

传统的修复图像技术分为两类。一类是基于几何图像模型的图像修补(inpainting)技术，该类技术利用偏微分方程和物理热扩散原理，对图像进行修复，代表的有：M.Bertalmio、A.L.Bertozzi等.《Navier-stokes，fluid dynamics，and image and video inpainting》；C.Ballester、V.Caselles等《Avariational model for filling-in gray level and color images》；T.F.Chanand J.Shen《Non-texture inpainting by curvature-driven diffusions(CDD)》。该类技术能够保存图像的线性结构，但只适用于修补图像中的小尺度缺损；对于稍大的区域效果非常糟糕，常常在修复区域出现明显的模糊。另一类是基于纹理合成的图像补全(completion)技术，其中代表性的有：L.Liang，C.Liu等《Real-timetexture synthesis by patch-based sampling》；A.Efros and W.T.Freeman《Image quilting for texture synthesis and transfer》；M.Ashikhmin《Synthesizing natural textures》；该类技术优点是速度快，但缺点不能很好的保存图像线性结构。之后的作者在借鉴inpainting的思想，对此进行改进，比如A.Criminisi等《Object removal by exemplar-based inpainting》；D.Simakov等《Summarizing visual data using bidirectional similarity》.CHO，T.S.等《The patch transform and its appl ications to image editing》；KOMODAKIS，N.等《Image completion using efficient belief propagation viapriority scheduling and dynamic pruning》；KUMAR，N.等《What is a goodnearest neighbors algorithm for finding similar patches in images？》；RUBINSTEIN，M.等《Improved seam carving for video retargeting》；WEXLER，Y等《Space-time completion of video》。该技术对于填充图像中大的丢失块有较好的效果，也能保存图像的结构，但速度非常慢，对于一张1200*1200大小的图片，修复200*200区域常常需要几分钟甚至半小时。因此上述技术对于局部影像去除或修复应用来说，都具有很大的局限性。

所以，如何在全景图像中自动去除或修复三脚架残留影像区域，是个急需解决的问题。

发明内容

本发明的目的在于解决上述问题，提供了一种自动移除全景图像中三脚架残留影像的方法，具有修复速度快且修复效果好的优点。

本发明的另一目的在于提供了一种自动移除全景图像中三脚架残留影像的装置。

本发明的技术方案为：本发明揭示了一种自动移除全景图像中三脚架残留影像的方法，包括：

设置原始全景图上的待替换边界，以遮盖三脚架残留影像；

设置以待替换边界上的点为中心的边界点所在块；

在所有的边界点中找出块置信度最高的点p′，点p′对应的边界点所在块是ψ_p′；

将待替换边界进行外扩，形成外扩后边界；