[发明专利]一种基于注意力机制的无人机自主着陆视觉引导方法

权利要求书

1.一种基于注意力机制的无人机自主着陆视觉引导方法，其特征在于，包括步骤如下：

步骤一、机载平台安装超低照度夜视宽光谱相机，辅以图像采集与处理端，实现对待降落跑道进行昼间、傍晚和黑夜环境下高清成像，得到跑道在不同姿态、背景及光线下的图像，得到超低照度夜视宽光谱相机采集的跑道图像，并用于后续的图像处理和偏航估计；

步骤二、基于步骤一中超低照度夜视宽光谱相机采集的跑道图像，利用深度卷积神经网络对跑道图像进行跑道目标的检测，采用基于侧向卷积的注意力机制对跑道图像特征信息进行提取，所述跑道图像特征信息包括跑道在不同距离即不同尺度跑道图像特征信息提取，得到并融合跑道特征图中的通道和空间特征信息，使得跑道图像特征提取网络更注重于对跑道目标通道和空间特征提取，增强跑道目标检测模型的抗复杂背景的能力，提升跑道目标的检测精度；

步骤三、基于步骤二中提取的跑道图像特征信息，采用赋权IOU(IntersectionofUnion)损失函数对跑道目标进行位置回归，通过对不同尺度跑道目标赋予不同权重，提高跑道目标检测模型对远距离即1km-5km以及中距离即0.2km-1km条件下跑道目标检测性能，实现在远距离条件下跑道目标的准确检测，并得到跑道目标在图像中的位置信息；

步骤四、基于步骤三得到的跑道目标在图像中的位置信息，利用跑道中轴线和透视投影原理计算出无人机沿跑道目标着陆区域的偏航角，进而辅助无人机在中距离和远距离下自主着陆中的视觉导航；

所述步骤四具体实现过程如下：

设跑道坐标系为OXYZ，o_cx_cy_cz_c为超低照度夜视宽光谱相机坐标系，跑道起始点与终点坐标分别为q_b、q_e；跑道起始与终点对应成像点分别为p_b、p_e，分别近似为预测检测框的下边界中点和上边界中点，理想跑道成像点为p₁、p₂，这里取其坐标为图像中心线处坐标即p₁＝[0,H/2]^T，p₂＝[0,-H/2]^T，其中W和H分别代表图像的宽度和高度；

跑道目标中轴线起始点在超低照度夜视宽光谱相机坐标系下方向向量为其中o_c为超低照度夜视宽光谱相机坐标系原点，p_b为跑道目标中轴线的起始点图像坐标，p_e为跑道目标在图像位置中轴线的终点坐标；理想跑道中轴线起始点在超低照度夜视宽光谱相机坐标系方向向量为其中p₁为理想跑道中轴线起始点图像坐标，p₂为理想跑道中轴线终点图像坐标；

相应地，令v＝v₁×v₂，u＝u₁×u₂，矩阵R为实际跑道到理想跑道位置处变换矩阵，且二者满足v＝R·u，其中绕超低照度夜视宽光谱相机坐标系y_c轴旋转角度即超低照度夜视宽光谱相机需要调整的偏航角度；

设绕超低照度夜视宽光谱相机坐标系x轴旋转角为ψ，绕y轴旋转角为θ，绕z轴旋转角为φ，得到矩阵R；超低照度夜视宽光谱相机坐标系下，其中f代表焦距，得到v是沿着x轴的向量：v＝k(1,0,0)^T；

其中h为跑道目标在图像中位置区域的预测框的大小，f代表超低照度夜视宽光谱相机焦距，u为超低照度夜视宽光谱相机坐标系内方向向量：u＝(x_u,0,z_u)^T，得到，

ψ＝φ＝0

R退化为，

通过结合上述公式v＝R·u得到偏航角θ：

2.根据权利要求1所述的基于注意力机制的无人机自主着陆视觉引导方法，其特征在于：步骤一中，在机载平台的吊舱中安装超低照度夜视宽光谱相机，能够实现对待降落跑道进行全天候高动态成像，包括白天、傍晚以及黑夜各类复杂环境下均能够实现高清晰度成像，辅以集成高速并行图像采集与嵌入式智能处理终端，实现对跑道目标进行图像采集与数据处理；无人机待降落的跑道目标进入超低照度夜视宽光谱相机可视范围内开启超低照度夜视宽光谱相机与处理终端，实现对待着陆跑道目标实时成像。