[发明专利]基于视觉导航的变电站无人机巡检方法及系统

说明书

本发明公开了一种基于视觉导航的变电站无人机巡检方法及系统，包括：基于无人机采集的视频流数据，获取多张连续的视频帧图像；将视频帧图像输入特征提取网络，提取变电站道路环境特征，将提取的特征分别输入偏航角预测网络和水平飞行预测网络，输出各方向的变电站道路的偏角参数和无人机飞行所需平移参数；根据输出的参数信息，基于高斯混合模型，确定无人机偏航角，进而生成无人机旋转方向控制指令以及生成无人机平移控制指令；根据控制指令，控制无人机飞行，进行巡检。本发明通过变电站的视觉图像学习，使得无人机能够认知预先设定的巡检路径及周边环境障碍，摆脱对GPS导航信号的依赖，实现变电站无人机自动巡检。

技术领域

本发明涉及变电站巡检技术领域，尤其涉及一种基于视觉导航的变电站无人机巡检方法及系统。

背景技术

基于远程视频监控的“遥视”系统在变电站巡检中得到广泛应用，220kV及以下变电站已基本实现无人值守。然而，当前的遥视系统通常为一个简单的视频监控回路，缺乏对视频数据和环境数据所蕴含内容的自主化智能分析，安全监控主要还是依赖值班员的人眼观察，人员劳动强度大，自动化程度和作业效率低，加之巡检现场布线复杂，威胁作业人员的人身安全。场站监控效果受巡检人员素质、技术水平以及环境等多种因素影响，难以保障复杂工况下变电站运行的可靠性。

近年来，随着深度学习和类脑计算为代表的新一代人工智能技术的发展，出现了固定摄像头和机器人等变电站自主巡检手段，已逐渐取代传统的人工作业巡检。固定摄像头巡检受限于变电站空间复杂，遮挡物较多，需要部署大量的智能摄像头，后期运维和检修量大；巡检机器人适合室外开放区域，但是受路面平整度影响，巡检机器人活动范围有限，并且观测视野较窄，难以监测整个变电站区域。相对而言，无人机在变电站的巡检中具有视野宽阔、轻巧灵活、高效便捷、成本低廉等优势，近年来也已广泛应用到输电线路的巡检中。

目前的无人机巡检主要采用GPS导航的形式，人工预先设定巡航路线，引导无人机按航线飞行。受建筑物遮挡和电磁干扰的影响，变电站的GPS信号质量较差，难以提供精确的位置信息，给无人机自主巡检带来很大困难。此外，由于目前无人机大多为半开放平台，无法直接读取无人机状态信息与云台摄像头的视频流数据。

发明内容

为解决上述现有技术的不足，本发明提供了一种基于视觉导航的变电站无人机巡检方法及系统，通过利用无人机生产厂家普遍支持的APK(Android application package，安卓应用程序包)读取并处理无人机状态信息与摄像头视频流数据，通过变电站的视觉图像学习，使得无人机能够认知预先设定的巡检路径及周边环境障碍，从而摆脱对GPS导航信号的依赖，解决无人机在变电站巡检时受变电站GPS信号质量影响的问题，实现变电站无人机自动巡检，保障“无人值守”变电站的安全运行。

第一方面，本公开提供了一种基于视觉导航的变电站无人机巡检方法。

一种基于视觉导航的变电站无人机巡检方法，包括：

获取无人机采集的视频流数据，对视频流数据进行预处理，获取多张连续的视频帧图像；

将视频帧图像输入特征提取网络，提取变电站道路环境特征，将变电站道路环境特征分别输入偏航角预测网络和水平飞行预测网络，输出各方向的变电站道路的偏角参数和无人机飞行所需平移参数；

根据各方向的变电站道路的偏角参数，基于高斯混合模型，确定无人机偏航角，进而生成无人机旋转方向控制指令；根据无人机飞行所需平移参数，生成无人机平移控制指令；

基于无人机旋转方向控制指令和无人机平移控制指令，控制无人机飞行，进行巡检。

进一步的技术方案，所述偏航角预测网络由一个Resnet残差块与四个全连接层构成，对于每一输入特征，偏航角预测网络输出n个方向的变电站道路的偏角参数和

进一步的技术方案，所述偏航角预测网络的损失函数为标准负对数似然函数，公式为：