[发明专利]合并图像的方法和装置

说明书

本发明实施例公开了一种合并图像的方法和装置，该方法包括：获取待合并的两张图像，该两张图像具有重叠区域，且该重叠区域被划分出至少两个候选融合区域；基于该两张图像之间的光流矢量，确定该至少两个候选融合区域中的每个候选融合区域对应的光流矢量映射误差；根据该至少两个候选融合区域各自对应的光流矢量映射误差，从该至少两个候选融合区域中选取该两个图像的目标融合区域；将该两张图像在该目标融合区域进行融合，从而得到该两张图像的合并图像。本发明实施例的合并图像的方法和装置能够减少由视差产生的模糊或重影。

技术领域

本发明涉及图像处理领域，尤其涉及一种合并图像的方法和装置。

背景技术

随着电子信息产业与社会需求的发展，各种图像采集设备和大尺寸显示器迅速进入到人们的日常生活。随之而来的问题是如何获取宽视角、高分辨率的图像或视频数据。例如，日常生活中的生活图像的全景拍摄、卫星图像及航拍图像的合并等，都需要把从不同视点拍摄的图像无缝拼接起来，合并成一幅宽视野、高分辨率的全景拼接图像。现有技术中一般使用普通相机阵列采集一组具有重叠区域的低分辨率或小视角图像，然后将来自多个视点的图像进行合并，经过拼接和融合组合成一幅高分辨率、宽视角的新图像，经过合并的图像包括拼接前图像的全部信息，并且看起来像在一个视点拍摄而成。

现有技术中经常采用加权平均值法对图像进行合并。这种方式虽然简单，却没有考虑不同视点采集到的图像的视差问题，其直接结果就是在合并前两张图像重叠区域内的物体会在合并图像中出现模糊或重影。

发明内容

本发明实施例提供了一种合并图像的方法和装置，以减少合并图像由于视差产生的模糊或重影。

第一方面，本发明实施例提供了一种合并图像的方法，该方法包括：获取待合并的两张图像，该两张图像是分别从两个视点采集到的图像，该两张图像具有重叠区域；将该重叠区域划分出至少两个候选融合区域，该至少两个候选融合区域中的每个候选融合区域中存在将该两张图像的每张图像划分为不连通的两部分的线；基于该两张图像之间的光流矢量，确定该每个候选融合区域对应的光流矢量映射误差，其中，该每个候选融合区域对应的光流矢量映射误差用于指示在该每个候选融合区域中的，该两张图像各自的子图像，分别基于该光流矢量，对应在同一视点的图像之间的误差；根据该至少两个候选融合区域各自对应的光流矢量映射误差，从该至少两个候选融合区域中选取出该两个图像的目标融合区域；将该两张图像在该目标融合区域进行融合，从而得到该两张图像的合并图像。

待合并的图像的重叠区域被划分成多个融合区域，通过确定该多个候选融合区域各自对应的光流矢量映射误差，能够对待合并图像在重叠区域内的子图像的光流矢量映射(或称光流场映射)误差进行估计，从而能够根据误差估计结果从候选融合区域中选择目标融合区域，将两张图像在目标融合区域进行融合，从而得到两张图像的合并图像，这样不但能够减少合并图像由于视差引起的模糊或重影，且能够节省图像合并的计算量。

结合第一方面，在第一方面的第一种可能的实现方式中，该方法还包括：该将该两张图像在该目标融合区域进行融合，从而得到该两张图像的合并图像，包括：基于该光流矢量，获取两张重叠子图像分别对应在该两个视点的中间视点的映射图像，该中间视点的坐标值为该两个视点的坐标值的均值，该两张重叠子图像为在该重叠区域中的该两张图像各自的重叠子图像；将两张映射图像在该目标融合区域进行融合，从而得到融合子图像；将该两张图像中的除该两张重叠子图像之外的子图像和该融合子图像进行拼接，从而得到该合并图像。

通过获取两张重叠子图像基于光流矢量对应在中间视点的映射图像，并将得到的映射图像在目标融合区域进行融合，从而得到基于光流矢量变换融合的融合子图像，最终获得合并图像，可以有效的减少合并图像由于视差引起的模糊或重影。