[发明专利]图像处理方法及设备

说明书

本发明实施例涉及一种图像处理方法及设备。包括：确定待处理图像信息，包括至少两张图像，该至少两张图像分别包括相同的多个第一特征点。在至少两张图像中的一张中，检测多条第一边缘线段；确定该多条第一边缘线段中的四条第一边缘线段。根据四条第一边缘线段围成的区域中的多个第一特征点在至少两张图像中的位置信息，确定该区域中的多个第一特征点对应的被摄点的位置。当区域中的被摄点共面时，确定该区域为矩形区域。通过本发明实施例，通过图像对应的三维空间内的信息来检测图像中的矩形区域，由于三维空间中的信息相比于二维图像中的信息更真实、准确，利用三维空间中的信息进行矩形区域检测时准确率更高，提升了用户体验。

技术领域

本发明实施例涉及图像处理技术领域，尤其涉及一种图像处理方法及设备。

背景技术

随着科技的不断发展，越来越多的智能设备被应用到日常生活中，如智能手机、平板等。这些智能设备一般都带有摄像头，随着拍摄技术的不断提升，这些智能设备可以随时对幻灯片、白板、广告牌等进行拍摄记录，并根据记录的图像确定图像中的有用信息。这种方便快捷的信息记录方式越来越受到人们的欢迎。

但由于用摄像头拍摄的是一幅经过投影变换的图象，所拍摄的现实世界在该图像中会存在畸变。这种情况在使用摄像头拍摄的矩形框的远端尤其明显，其中远端是指矩形框距离摄像头较远的边或较远的两边之间的夹角，这种畸变图像会导致读者不能够有效的获取图像中的信息。现有技术中解决该问题的方法是，通过检测图像中的四边形，并根据预先设定的相邻边之间的夹角阈值，相对的边之间的夹角阈值以及该四边形的周长与图像周长的比的阈值，来估计该四边形在实际中是不是矩形，进而进行校正。但是，图像中的信息是存在畸变的信息，因而根据该信息进行判断时误判率大。

发明内容

本发明实施例提供了一种图像处理方法及设备。通过本发明实施例，在进行矩形区域检测时，通过图像对应的三维空间内的信息来检测图像中的矩形区域，由于三维空间中的信息相比于二维图像中的信息更真实、准确，利用三维空间中的信息进行矩形区域检测时准确率更高，提升了用户体验。

一方面，本发明实施例提供了一种矩形区域检测方法。该方法具体包括：确定待处理图像信息，该待处理图像信息包括至少两张图像(例如，通过双目或多目相机拍摄的多张图像)，该至少两张图像分别包括相同的多个第一特征点。在至少两张图像中的一张中，检测多条第一边缘线段；确定该多条第一边缘线段中的四条第一边缘线段。根据四条第一边缘线段围成的区域中的多个第一特征点在至少两张图像中的位置信息，确定该区域中的多个第一特征点对应的被摄点的位置，其中该区域中的多个第一特征点包括四条第一边缘线段围成的四边形的四个顶点。当区域中的多个第一特征点对应的被摄点共面时，确定该区域为矩形区域。通过本发明实施例，在进行矩形区域检测时，判断边缘线段围成的区域中的特征点对应的被摄点是否共面，以此可判断四条第一边缘线段围成的区域，在三维空间中是否为一个平面，只有在是一个平面时，该四条第一边缘线段才可能为矩形区域的边缘线段，降低了误判率，提高了用户体验。

在一个可能的实现中，上述根据四条第一边缘线段围成的区域中的多个第一特征点在至少两张图像中的位置信息，确定该区域中的多个第一特征点对应的被摄点的位置具体包括：根据四条第一边缘线段围成的区域中的多个第一特征点分别在至少两张图像中的二维坐标(位置信息)，计算该区域中的第一特征点对应的第二特征点在第一三维坐标系的坐标(例如，拍摄设备坐标系，也可以说相机坐标系)；例如，可用光束平差法计算。本发明实施例可以实现，通过跟踪特征点在不同图像中的位置，估算出特征点在三维空间的位置，根据该位置判断特征点是否共面，降低了误判的可能。

需要说明的是，第一三维坐标系为相机坐标系，该坐标系的原点即为相机光心所在的位置。第二三维坐标系为平面三维坐标系，其中，该第二三维坐标系的三个坐标轴中的两个与多个第二特征点共面或者该第二三维坐标系的三个坐标轴中的两个构成的平面与多个第二特征点构成的平面平行。