[发明专利]图像处理设备和图像处理方法

说明书

本发明涉及一种图像处理设备、图像处理方法和存储介质。可计算误差小的图像合成所用的变换参数并减少合成图像中出现的失真。该图像处理设备包括：特征点提取单元，其从第一图像和第二图像的各图像提取在两个图像之间彼此对应的特征点，第一图像和第二图像是拍摄纸质文档获得的图像并且其拍摄范围彼此不同；边缘提取单元，其从各图像提取在两个图像之间彼此对应的边缘；消失点检测单元，其从各图像检测纸质文档所属的平面的消失点；变换参数导出单元，其通过使用与交点相对应的坐标，导出图像合成所用的变换参数，该交点是连接特征点和消失点的直线与边缘的交点；以及图像合成单元，其通过使用变换参数来合成第一图像和第二图像。

技术领域

本发明涉及通过合成多个图像来生成合成图像的图像处理设备。

背景技术

通过使用照相机拍摄诸如商业表单等的纸质文档并且进行字符识别，已提取了在纸质文档上描述的信息。然而，根据纸质文档的薄片大小和照相机的图像感测元件的分辨率，存在不能从所拍摄图像以足够的精度提取信息的情况。结果，通过以下操作已提取了信息：通过代替一次摄像而是将摄像分割成多次来拍摄薄片全体，通过将多次摄像所获得的各图像合成来生成包括薄片全体的一个图像，并且针对所生成的合成图像进行字符识别。日本特开 2004-342067描述了如下的方法：通过从具有重叠区域的两个图像中提取在这两个图像中彼此对应的特征点、并且通过使用根据所提取的特征点导出的透视投影变换的变换参数，来进行图像合成。日本特开2002-57879描述了通过消失点检测来校正图像的失真的方法。

在合成图像时所使用的变换参数中存在误差的情况下，存在合成图像中发生失真的可能性。此外，存在原本应当作为直线连接的部分(例如，商业表单的格线)弯曲或者这些部分未连接的情况。结果，为了使得可以针对合成图像以足够的精度提取信息，需要抑制上述的图像的失真和格线的偏移。

结果，本发明的目的是提供一种图像处理设备，其能够计算误差小的图像合成所使用的变换参数、并且使得在最终生成的合成图像中出现的失真小。

发明内容

根据本发明的一个方面，一种图像处理设备，包括：特征点提取单元，用于从第一图像和第二图像的各图像中提取在两个图像之间彼此对应的特征点，其中所述第一图像和所述第二图像是通过拍摄纸质文档所获得的图像，并且所述第一图像和所述第二图像的拍摄范围彼此不同；边缘提取单元，用于从所述各图像中提取在两个图像之间彼此对应的边缘；消失点检测单元，用于从所述各图像中检测所述纸质文档所属的平面的消失点；变换参数导出单元，用于通过使用与如下的交点相对应的坐标，来导出图像合成所用的变换参数，其中所述交点是连接所提取的特征点和所检测到的消失点的直线与所提取的边缘的交点；以及图像合成单元，用于通过使用所导出的变换参数来合成所述第一图像和所述第二图像。

根据本发明的一个方面，一种图像处理方法，包括以下步骤：从第一图像和第二图像的各图像中提取在两个图像之间彼此对应的特征点，其中所述第一图像和所述第二图像是通过拍摄纸质文档所获得的图像，并且所述第一图像和所述第二图像的拍摄范围彼此不同；从所述各图像中提取在两个图像之间彼此对应的边缘；从所述各图像中检测所述纸质文档所属的平面的消失点；通过使用与如下的交点相对应的坐标，来导出图像合成所用的变换参数，其中所述交点是连接所提取的特征点和所检测到的消失点的直线与所提取的边缘的交点；以及通过使用所导出的变换参数来合成所述第一图像和所述第二图像。

根据本发明的一个方面，一种非暂时性计算机可读存储介质，其存储程序，所述程序用于使计算机进行图像处理方法，所述图像处理方法包括以下步骤：从第一图像和第二图像的各图像中提取在两个图像之间彼此对应的特征点，其中所述第一图像和所述第二图像是通过拍摄纸质文档所获得的图像，并且所述第一图像和所述第二图像的拍摄范围彼此不同；从所述各图像中提取在两个图像之间彼此对应的边缘；从所述各图像中检测所述纸质文档所属的平面的消失点；通过使用与如下的交点相对应的坐标，来导出图像合成所用的变换参数，其中所述交点是连接所提取的特征点和所检测到的消失点的直线与所提取的边缘的交点；以及通过使用所导出的变换参数来合成所述第一图像和所述第二图像。