[发明专利]一种环视系统外参数在线修正方法、系统、设备及介质

说明书

本发明涉及一种环视系统外参数在线修正方法、系统、设备及介质，该方法包括：步骤S1：采用环视系统采集图像数据；步骤S2：基于ORB特征匹配和像素梯度值阈值设置，对环视系统采集到的图像数据进行帧选择和像素选择，确定用于后续优化的图像帧以及图像的像素；步骤S3：利用所选图像帧上相应的像素点，建立双相机模型，通过计算相邻相机共视区的像素均值比对共视区的像素值进行缩放，并基于各个像素对应的双相机损失项误差构建优化图结构；步骤S4：利用列文伯格‑马夸尔特LM算法对优化图结构进行图优化以获得最优的相机位姿，从而完成对环视系统外参数的修正。与现有技术相比，本发明放宽了对地面车道线要求的限制，对地面纹理无特殊要求。

技术领域

本发明涉及环视系统参数修正领域，尤其是涉及一种环视系统外参数在线修正方法、系统、设备及介质。

背景技术

作为高级驾驶辅助系统不可或缺的组成部分，越来越多的车辆配备了环视系统。环视系统通常由四到六个广角鱼眼摄像头组成，这些摄像头安装在面向不同方向的车辆上，以实现对车辆周围环境的360度全覆盖感知。通过对环视系统进行内参标定与外参标定，我们可以确定环视系统中相机之间的相对位姿，然后实时地合成高质量的环视图。环视图不仅可以拓宽驾驶员视野并消除盲区，还可以用于停车位检测、行人检测、自主泊车等计算机视觉任务中，对促进辅助驾驶的发展具有重要的作用。

在进行了外参数标定之后，环视系统中的相机将被固定在车辆上，以保证外参数(即相机之间的相对位姿)在通常情况下不会发生明显变化。然而，在车辆行驶的过程中发生的碰撞、颠簸，或是气温变化导致的热胀冷缩现象都有可能会破坏环视相机系统中相机之间的原始空间结构，导致外参数发生变化。此时，如果依然使用原始的外参数来合成环视图，而不进行相应的调整，生成地环视图中将会出现明显的几何裂缝，这反映着环视系统的感知发生了异常。

当合成的环视图中出现了明显的几何裂缝时，及时去修正环视系统的外参数对行车安全的保证有着重要的意义。不幸的是，到目前为止，学术界与工业界仍然缺乏针对环视系统设计的能够有效地、在线地修正环视系统外参数的解决方案。目前，在相关领域存在的现有的研究方案主要存在着以下两点的局限性：

a)大多数现有的外参在线修正的方法都是针对普通的多相机系统(如双目相机)而设计的。尽管环视系统也属于一种特殊的多相机系统，但由于其结构的特殊性，这些方法通常不容易被扩展以使得它能够适应环视系统的特点。具体来说，现有的大多数相关方案都是在不同相机的共视区提取特征点并计算对应的描述符，然后再对特征进行匹配，最终利用匹配获得的特征点对恢复出精准的外参数。然而，在环视系统中，相邻相机之间的共视区比普通双目相机窄得多，畸变也更加严重，这导致了我们很难从这些区域中提取出高质量的特征对。

b)现有的适用于环视系统的解决方案大多基于一些像车道线这样的特定标志物，这意味着他们依赖于相对理想的应用环境。例如，地面上必须有两条可以被清晰地检测到的平行车道线。经过检索，中国专利公开号CN112529966A公开了一种车载环视系统的在线标定方法及其车载环视系统，该方法需要基于车道线信息进行特征提取，对地面环境有限制。因此，这些方法在可用性和泛化能力方面都有着明显的局限性。

发明内容

本发明的目的就是为了克服上述现有技术存在的缺陷而提供了一种地面纹理局限性低、精度高的环视系统外参数在线修正方法、系统、设备及介质。

本发明的目的可以通过以下技术方案来实现：

根据本发明的第一方面，提供了一种环视系统外参数在线修正方法，该方法包括以下步骤：

步骤S1：采用环视系统采集图像数据；

步骤S2：基于ORB特征匹配和像素梯度值阈值设置，对环视系统采集到的图像数据进行帧选择和像素选择，确定用于后续优化的图像帧以及图像的像素；