[发明专利]一种基于神经网络的棋盘格角点检测方法及其应用

说明书

本发明属于图像处理技术领域，并具体公开了一种基于神经网络的棋盘格角点检测方法及其应用。该方法包括：获取待测棋盘格的多角度图像，并对其进行预处理以获得灰度图像；基于神经网络对灰度图像进行角点检测，以此确定候选角点；剔除不符合棋盘格几何标准的候选角点，以此确定待检角点；根据获得的待检角点确定待测棋盘格角点的亚像素位置；对获得的待检角点进行区域筛选，确定各个待检角点的索引矩阵，进而得到多个互不交叉的棋盘格角点序列，以此完成待测棋盘格的角点检测。本发明对光照遮挡和噪声偏移等干扰具有较高的检测鲁棒性，同时对由镜头不均匀或广角相机拍摄造成的图像弯曲和畸变具有很高的定位稳定性，并且能同时对多个棋盘完成检测。

技术领域

本发明属于图像处理技术领域，更具体地，涉及一种基于神经网络的棋盘格角点检测方法及其应用。

背景技术

摄像机标定在目标追踪、图像融合、三维重建、机器人导航领域有着广泛的应用。在这些领域中，摄像机通过获取目标场景的多张二维平面图像，完成对目标场景精确的三维建模。而三维建模的完成需要提前获知摄像机的物理(内部)参数和几何(外部)参数，一般通过摄像机标定来确定这些特定参数。摄像机标定通过对已知尺寸的标定模板上的特征点进行二维位置坐标的检测，然后将这些特征点的三维空间位置和拍摄图像上的二维位置坐标一一对应，获取世界坐标系和像素坐标系的位姿转换关系，进而计算出摄像机的物理与几何参数。常用的标定模板包括平面棋盘格模板，平面圆点模板和自制三维立体模板。因棋盘格模板具有易于制作、对比度高、特征明显和易于识别等特点，目前常被用于摄像机标定。平面棋盘格模板上的特征点是黑白方块相交的角点，因此，提高棋盘格角点检测的精度，就可以提高摄像机标定的精确度，进而提高上述领域中三维建模的精度。

众多学者对棋盘格角点检测进行了广泛而深入的研究，并提出了很多卓有成效的算法。最早的是基于角点几何特征的自相关检测算法，这类通用角点检测算法的代表是Moravec、Harris和SUSAN。Moravec算法首先以待检测点为中心取特定大小的区域，并从八个等角度方向计算自相关值，然后将最小值作为角点的响应函数，从而确定是否为角点。但由于寻找的方向太少，这种方法不能很好地解决灰度不均匀以及角点位于图像边缘的情况。Harris和Setphens设计的Harris算法采用像素点灰度值的一阶导数来计算自相关性：首先对每个像素点计算以其为中心的2ⅹ2自相关矩阵：A＝ω^*|(▽I)(▽I)^T|，其中w为高斯平滑模板。同时考虑图像的奇异值分解，定义角点的判别式为：det(A)-k(trace(A))²，其中k为给定的常数，当判别式的值很大时，就认为此处为一个角点。Harris算法的鲁棒性和定位性较好，但是容易产生大量错点。Smith和Brady提出的SUSAN算法，通过使用一个可信赖的滤波器，对中心核周围进行采样，自动返回角点判定值，这种算法可以检测到对比度不明显，或者清晰度不够的角点，适用于低层次图像的处理，但是计算量较大，定位精度较差。

除此之外，很多特定的棋盘格角点检测算法也相继被提出。Ha等人通过对以待测点为中心的圆形边界上的像素点灰度值构成的特征向量进行计算和打分，可以有效地识别出棋盘格的角点。角点在特征向量的四个不同位置(一般选取将圆边界四均分的点)的强度具有明显的差异，设定一个阈值，超过此阈值的待测点即可被认为是角点，这种方法虽然便捷，但会造成很多的假阳性点。Benett等人构建了一个更加复杂的模型ChESS，即采用等角16点而非4点进行判别。这种方法在保持运算速度基本不变的情况下，检测效果大大增强，但是该算法假定所有角点都是由两个线段正交形成，因而不适用于镜头畸变的情况(如广角相机)。