[发明专利]用于激光雷达和相机的联合标定方法及其系统和电子设备

说明书

一种用于激光雷达和相机的联合标定方法及其系统和电子设备。该联合标定方法包括步骤：在标板位于该激光雷达和该相机的公共视场内时，通过该激光雷达和该相机分别采集标定场景数据，获取点云数据和图像数据，其中每该标板具有至少三直线边缘和至少三标板角点，并且任意相邻的两该直线边缘相交于相应的该标板角点；提取所述点云数据中与该标板上的每该标板角点对应的点云角点，以获得每该标板角点的三维坐标；提取所述图像数据中与该标板上的每该标板角点对应的图像角点，以获得每该标板角点的二维坐标；以及基于通过每该标板角点的所述三维坐标和所述二维坐标组成的点对数据，通过PnP方法求解，以获得该激光雷达和该相机之间的外参。

技术领域

本发明涉及多传感器融合技术领域，更具体地涉及一种用于激光雷达和相机的联合标定方法及其系统和电子设备。

背景技术

近年来，随着AI(即人工智能)技术的飞速发展和传感器技术水平的进步，诸如自动驾驶、环境感知等方向的技术已经成为众多学者和公司的研究热点，而这些技术实现的前提则是需要充分地感知周围环境。以自动驾驶为例，移动平台集成了激光雷达、相机、毫米波雷达、超声波雷达、IMU和GPS等多种传感器，使得多传感器的融合成为其核心技术之一。例如，激光雷达虽然能探测并输出周围环境的三维点云信息，探测范围大，且抗干扰能力强，但其获得的点云稀疏；相机虽然能够感知丰富的环境信息，信息密集，但其容易受到光照等因素的干扰，且没有深度信息。换句话说，激光雷达和相机各有所长，这使得两者的融合将对增强移动平台对周围环境的感知能力具有重要意义。然而，激光雷达和相机之间的相对位置关系的准确程度又直接影响着两者信息融合的效果，因此对激光雷达和相机之间的外参进行准确标定，是正确感知周围环境的基础。

目前，激光雷达和相机的联合标定方法存在很多，大概可以分为基于标定物对应角点的PnP(Pespective-n-Point)方法和自适应迭代方法。但现有的标定方法主要侧重于提高标定精度，而很少关注标定过程的效率和速度。虽然在测试验证和算法开发过程中，标定精度的重要性可能会高于标定效率，但是在规模化量产中，在保证标定精度的前提下，在合理的标定场景中实现较高的标定效率就显得极为重要。

发明内容

本发明的一目的在于提供一种用于激光雷达和相机的联合标定方法及其系统和电子设备，其能够提高对激光雷达和相机的联合标定的效率，有助于满足规模化量产的需求。

本发明的另一目的在于提供一种用于激光雷达和相机的联合标定方法及其系统电子设备，其能够在较高的标定精度的前提下，具备较高的标定效率，有助于缩短标定时间、降低标定成本。

本发明的另一目的在于提供一种用于激光雷达和相机的联合标定方法及其系统和电子设备，其中，在本发明的一实施例中，所述联合标定方法不仅能够准确提取激光雷达的点云数据中点云角点，而且能够将提取的点云角点和标板的标板角点一一对应，有助于提高标定效率。

本发明的另一目的在于提供一种用于激光雷达和相机的联合标定方法及其系统和电子设备，其中，在本发明的一实施例中，所述联合标定方法系统在无需人工参与的情况下，自动化提取激光雷达的点云数据中的点云角点，进而提高标定效率。

本发明的另一目的在于提供一种用于激光雷达和相机的联合标定方法及其系统和电子设备，其中，在本发明的一实施例中，所述联合标定方法能够采用模板匹配法来提取图像中标板的标板角点，鲁棒性高，无错误或冗余角点。

本发明的另一目的在于提供一种用于激光雷达和相机的联合标定方法及其系统和电子设备，其中，在本发明的一实施例中，所述联合标定系统能够自动化地提取图像中的图像角点，并将提取的图像角点和标板的标板角点一一对应，有助于提高标板角点提取的可靠性和计算效率。

本发明的另一目的在于提供一种用于激光雷达和相机的联合标定方法及其系统和电子设备，其中，在本发明的一实施例中，所述联合标定方法在标定过程中无需转换视角或者改变标板位置，有利于提高数据采集效率，进而提高标定效率。