[发明专利]无人机电力巡检图像关键电力部件自动诊断与标注系统

权利要求书

1.一种无人机电力巡检图像关键电力部件自动诊断与标注系统，其特征在于，包括一电力部件目标检测模块、一电力部件故障检测模块、一提供人机交互功能的人机交互模块、一标注模块以及一无人机电力巡检影像库；

所述电力部件目标检测模块从所述无人机电力巡检影像库中获取待标注电力巡检图像，通过一电力部件目标检测模型检测该图像中的电力部件类别及电力部件的位置，并为待标注电力巡检图像标注电力部件的类别信息及该电力部件在图像中的位置坐标，并通过所述人机交互模块显示；

所述电力部件故障检测模块获取经所述电力部件目标检测模块检测标注后的图像，通过一电力部件故障检测模型检测该图像中电力部件对应的故障状态和故障位置，并为待标注电力巡检图像标注电力部件的故障状态信息及故障在图像中的位置坐标，并通过所述人机交互模块显示；

所述标注模块用于生成电力部件目标检测模型与电力部件故障检测模型预训练的训练数据以及用于对电力部件目标检测模型与电力部件故障检测模型在自动检测标注阶段处理的检测标注图像进行审核与修正，并将审核存在错误，且完成修正后的数据作为电力部件目标检测模型或电力部件故障检测模型后续训练的训练数据；

所述无人机电力巡检影像库用于存储待标注电力巡检图像、训练数据以及标注处理后的电力巡检图像及其对应的标注数据。

2.根据权利要求1所述的无人机电力巡检图像关键电力部件自动诊断与标注系统，其特征在于，在预训练阶段，所述标注模块从所述无人机电力巡检影像库中获取待标注电力巡检图像数据，在待标注电力巡检图像中框选电力部件、电力部件故障区域，标注分类信息；其中，分类信息包括：电力部件类别及电力部件在图像中的位置坐标，电力部件故障状态及故障在图像中的位置坐标；完成标注后，将图像及其标注数据存储至所述无人机电力巡检影像库，并作为预训练阶段的训练数据。

3.根据权利要求1所述的无人机电力巡检图像关键电力部件自动诊断与标注系统，其特征在于，提取训练数据中的标注后的图像、电力部件类别及电力部件在图像中的位置坐标作为目标检测训练集，经一SSD部件目标检测网络进行训练，建立所述电力部件目标检测模型。

4.根据权利要求1所述的无人机电力巡检图像关键电力部件自动诊断与标注系统，其特征在于，提取训练数据中的标注后的图像、电力部件故障状态及故障在图像中的位置坐标作为故障检测训练集，经一SSD故障目标检测网络进行训练，建立所述电力部件故障检测模型。

5.根据权利要求1所述的无人机电力巡检图像关键电力部件自动诊断与标注系统，其特征在于，通过如下步骤实现自动诊断与标注：

步骤S1：根据所述无人机电力巡检影像库接口，从所述无人机电力巡检影像库中获取待标注电力巡检图像；

步骤S2：通过电力部件目标检测模块在待标注电力巡检图像中检测并框选出电力部件所在区域，并标注电力部件类别信息和电力部件在图像中的位置坐标；

步骤S3：将步骤S2检测标注的结果经由标注模块以及人机交互界模块进行审核；若审查无误，则转入步骤S4；否则，进行修正处理，将修正结果进入步骤S4，并标记该图像，作为电力部件目标检测模型的后续训练数据；

步骤S4：通过电力部件故障检测模块读取步骤S3已框选的电力部件所在区域，在该区域内检测并框选出电力部件故障所在区域，并标注电力部件故障状态信息及故障在图像中的位置坐标；

步骤S5：将步骤S4检测标注的结果经由标注模块以及人机交互界模块进行审核；若审查无误，则进入步骤S6；否则，进行修正处理，将修正结果进入步骤S6，并标记该图像，作为电力部件故障检测模型的后续训练数据；

步骤S6：融合步骤S3和步骤S5的处理结果，生成一xml文件，与图像一同存入所述无人机电力巡检影像库；所述xml文件包括：电力部件类别信息和电力部件在图像中的位置坐标，以及电力部件故障类别信息和故障在图像中的位置坐标。