[发明专利]一种基于生成式对抗网络的无人驾驶车道线检测方法有效

专利信息
申请号: 201910132608.2 申请日: 2019-02-22
公开(公告)号: CN109886200B 公开(公告)日: 2020-10-09
发明(设计)人: 季一木;陈治宇;吴夜;薛景;刘尚东;王汝传;尧海昌 申请(专利权)人: 南京邮电大学
主分类号: G06K9/00 分类号: G06K9/00;G06K9/62
代理公司: 南京瑞弘专利商标事务所(普通合伙) 32249 代理人: 梁天彦
地址: 210003 江苏*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 生成 对抗 网络 无人驾驶 车道 检测 方法
【权利要求书】:

1.一种基于生成式对抗网络的无人驾驶车道线检测方法,其特征在于:包括车道线图片的生成网络、判别网络和检测算法三个部分;首先获取生成网络、判别网络的训练数据,然后将低分辨率图片输入生成网络生成超分辨率图片,将高分辨率图片和超分辨率图片输入判别网络进行准确度判断,并根据判断结果捕捉超分辨率图片和高分辨率图片的数据分布,生成网络和判别网络基于数据分布进行对抗训练,直至达到纳什均衡,得到最优化的生成网络,将最优化的生成网络生成的超分辨率图片输入检测算法进行车道线识别;所述生成网络和判别网络采用神经网络进行训练,训练数据包括成对的车道线模糊图片和车道线清晰图片,即成对的低分辨率图片和高分辨率图片;具体训练过程包括如下步骤:

步骤1:获取生成网络G和判别网络D的训练数据,采集车道线的高分辨率图片IHR,并制作高分辨率图片IHR对应的低分辨率图片ILR

步骤2:将低分辨率图片ILR输入生成网络G,从而生成超分辨率图片ISR=G(ILR);

步骤3:将成对的超分辨率图片ISR和高分辨率图片IHR同时输入判别网络D进行准确度判断,并根据判断结果捕捉超分辨率图片ISR和高分辨率图片IHR的数据分布pdate(ISR)和pdate(IHR);

步骤4:生成网络G和判别网络D基于数据分布进行对抗训练,直至达到纳什均衡,得到最优化的生成网络G。

2.根据权利要求1所述的基于生成式对抗网络的无人驾驶车道线检测方法,其特征在于:该方法的具体执行过程如下:

(1)初始化

定义低分辨率图片为ILR、高分辨率图片为IHR、超分辨率图片为ISR;高分辨率图片IHR来自于真实车道线数据集Pdata(IHR),低分辨率图片ILR通过对高分辨率图片IHR进行高斯滤波和下采样得到,所有低分辨率图片构成低分辨率车道线数据集Pdata(ILR);

(2)优化生成网络G

将低分辨率图片ILR输入生成网络G,生成网络G为参数化的残差网络,在生成网络G中分布一组完全相同的残差块,每个残差块都有两个卷积层,每个卷积层后面加上一个规划层,并使用ReLU函数作为激活函数,其中卷积层的卷积核均为3×3;在这个神经网络中,通过训练两个卷积层来提高分辨率,最终得到超分辨率图片ISR;优化后的生成网络参数表示为:

其中:表示优化后的生成网络参数,θG表示生成网络参数,N表示样本总数,n=1,2,3,…,N,表示第n个低分辨率图片ILR,表示第n个高分辨率图片IHR,表示第n个超分辨率图片ISR;表示经过生成网络参数为θG的生成网络G后输出的表示计算和之间的欧式距离;

(3)捕捉超分辨率图片ISR和高分辨率图片IHR的数据分布pdate(ISR)和pdate(IHR)

将高分辨率图片IHR和超分辨率图片ISR输入判别网络D,超分辨率图片ISR先经过八层使用ReLU函数作为激活函数的卷积层,再经过包含1024个链接点的全连接层,最终使用Sigmoid函数判断超分辨率图像ISR的真假;高分辨率图片IHR经判别网络D输出真假概率D(IHR),获得高分辨率图片IHR的数据分布pdate(IHR);超分辨率图片ISR经判别网络D输出真假概率D(ISR),获得超分辨率图片ISR的数据分布pdate(ISR);

(4)优化判别网络D

对判别网络D进行最小化交叉熵操作,判别网络D的损失函数为:

其中:θD表示判别网络参数,θG表示生成网络参数,表示高分辨率图片IHR采样于真实车道线数据集Pdata(IHR)的期望;表示低分辨率图片ILR采样于低分辨率车道线数据集Pdata(ILR)的期望;

在给定生成网络G情况下,最小化上述损失函数得到最优解;在连续空间上,将上述损失函数修改为:

其中:pg(IHR)表示高分辨率图像IHR经生成网络G后的数据分布;

在由任意非零实数m和n,以及任意实数y∈[0,1]构成的表达式-mlog(y)-nlog(1-y)中,在位置处得到最小值;据此,在给定生成网络G情况下,损失函数ObjDDG)在位置处得到最小值,该最小值即为判别网络D的最优解;

(5)全局最优解

当输入判别网络D的数据为高分辨率图片IHR时,判别网络D的目标是输出值D(IHR)趋于1;当输入判别网络D的数据为超分辨率图片ISR时,判别网络D的目标是输出值D(ISR)趋于0;

采用交替优化的方法,先固定生成网络G,优化判别网络D,向判别网络D输入高分辨率图片IHR,使得D(IHR)最大;完成判别网络D的优化后,固定判别网络D,优化生成网络G,向生成网络G输入高分辨率图片IHR,再向判别网络D输入ISR,使得D(ISR)最小;交替上述过程,直至pdata=pg,得到生成网络G和判别网络D的全局最优解;

其中,pdata表示高分辨率图像IHR的总体数据分布,是pdate(IHR)归一化后的结果,pg表示高分辨率图像IHR经生成网络G后的总体数据分布,是pg(IHR)归一化后的结果。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京邮电大学,未经南京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910132608.2/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top