[发明专利]基于多种卷积神经网络融合的机场道面病害异物检测方法有效
申请号: | 202110228020.4 | 申请日: | 2021-03-02 |
公开(公告)号: | CN113111703B | 公开(公告)日: | 2023-07-28 |
发明(设计)人: | 郭文彤;方宏远;钟山;王念念;朱锐;陈家将;曹顺林;张高翼 | 申请(专利权)人: | 郑州大学 |
主分类号: | G06V20/10 | 分类号: | G06V20/10;G06V10/25;G06V10/26;G06V10/762;G06V10/80;G06V10/82;G06N3/045;G06N3/0464;G06N3/084 |
代理公司: | 长沙楚为知识产权代理事务所(普通合伙) 43217 | 代理人: | 李大为 |
地址: | 450001 河南省郑*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 多种 卷积 神经网络 融合 机场 病害 异物 检测 方法 | ||
1.一种基于多种卷积神经网络融合的机场道面病害异物检测方法,其特征在于,其步骤包括:
S1:采集机场道面病害异物图像;
S2:对步骤S1获取的图像数据进行预处理,构建用于训练神经网络的机场道面病害异物数据库;
S3:对目标检测算法YOLOv3、Mask R-CNN分别进行改进优化,搭建YOLOv3、Mask R-CNN卷积神经网络,并初始化卷积神经网络超参数进行训练,
所述对目标检测算法Mask R-CNN的优化改进为坐标损失函数采用DIoU坐标损失函数,并采用DIoU-NMS算法进行目标检测;
所述YOLOv3神经网络包括Darknet-53网络与YOLO层;所述Darknet-53网络包含53个卷积层,并引入了残差结构;
所述对目标检测算法YOLOv3的优化改进为采用K-Means算法对机场道面病害和FOD样本进行聚类分析得到多种尺寸的先验框,并将Darknet-53网络中第109层与特征提取网络的第11层进行特征融合,在原有特征层基础上增加一个尺度特征层;
S4:调整卷积神经网络超参数,直至卷积神经网络收敛且误差损失值满足设定值,并保存此时的网络权重参数,完成YOLOv3、Mask R-CNN卷积神经网络的训练;
S5:将训练后的YOLOv3卷积神经网络的输出层与Mask R-CNN卷积神经网络的输入层连接进行融合,构建机场道面病害异物像素级别的智能分割模型;
S6:将测试图像输入到保存的智能分割模型中,输出机场道面的病害和异物的像素级别的分割结果;
S7:统计分割结果的掩码对应图像的像素,根据图像像素和真实面积拓扑学关系推求病害和异物的尺寸和面积,输出机场道面病害异物的语义信息。
2.根据权利要求1所述的一种基于多种卷积神经网络融合的机场道面病害异物检测方法,其特征在于,步骤S1中,所述机场道面病害异物图像由车载CCD相机在LED灯照射下进行高分辨率拍照获得,对获得的机场道面病害异物图像大数据进行分类处理,并挑选具有典型病害特征或异物特征的图像。
3.根据权利要求1或2所述的一种基于多种卷积神经网络融合的机场道面病害异物检测方法,其特征在于,步骤S2中,所述预处理为对所述图像数据裁剪处理成同样尺寸大小,并通过包括翻转、变换和曝光方法进行数据增强,标注不同机场道面病害异物的位置及轮廓,再提取标注数据保存,建立机场道面病害异物图像数据库,并随机按比例分为训练集和测试集。
4.根据权利要求1或2所述的一种基于多种卷积神经网络融合的机场道面病害异物检测方法,其特征在于,所述Mask R-CNN包括依次顺序执行的主干网络、特征金子塔、区域建议网络、ROIAlign、全卷积网络、图片输出端。
5.根据权利要求1或2所述的一种基于多种卷积神经网络融合的机场道面病害异物检测方法,其特征在于,所述初始化卷积神经网络超参数进行训练为每次训练从训练集中提取固定数量的样本数据输入到模型,使用随机梯度下降法与反向传播算法进行模型的训练,直到YOLOv3、Mask R-CNN卷积神经网络收敛。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州大学,未经郑州大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110228020.4/1.html,转载请声明来源钻瓜专利网。