[发明专利]一种毫米波雷达与深度学习视觉融合的前方多车辆跟踪方法有效

专利信息
申请号: 201811219589.9 申请日: 2018-10-19
公开(公告)号: CN109459750B 公开(公告)日: 2023-05-23
发明(设计)人: 金立生;闫福刚;司法;石健;夏海鹏;朱菲婷;冯成浩;孙栋先;王禹涵 申请(专利权)人: 吉林大学
主分类号: G01S13/72 分类号: G01S13/72;G01S13/86
代理公司: 长春吉大专利代理有限责任公司 22201 代理人: 张岩
地址: 130012 吉*** 国省代码: 吉林;22
权利要求书: 查看更多 说明书: 查看更多
摘要: 发明涉及一种毫米波雷达与深度学习视觉融合的前方多车辆跟踪方法,利用毫米波雷达获得前方数据信息,根据其回波反射强度以及宽度信息,剔除掉无效信息,只保留下前方的车辆信息。根据毫米波雷达与摄像机相融合的方法,通过对雷达信息的滤波以及在线跟踪模型生成运动轨迹并进行轨迹关联。对已经进行了轨迹关联的前方车辆进行记录并编号。对已经生成轨迹并编号的前方车辆,只需要对下一周期的数据进行上述步骤的重复处理,并进行一致性检验,将其添加到已编号的轨迹中去。对于新出现的车辆,按照最开始的步骤进行轨迹生成、轨迹关联与编号。本发明结合了毫米波雷达和视觉深度学习的优势,能有效提高对于前方多车辆目标跟踪的准确度与鲁棒性。
搜索关键词: 一种 毫米波 雷达 深度 学习 视觉 融合 前方 车辆 跟踪 方法
【主权项】:
1.一种毫米波雷达与深度学习视觉融合的前方多车辆跟踪方法,其特征在于,包括以下步骤:A、建立毫米波雷达坐标系与摄像机坐标系之间的坐标转换关系,将二者的坐标系进行统一,使用毫米波雷达和摄像机两者的最低采样频率进行采样,以保持时间上的一致性;B、对毫米波雷达的数据进行接收,按规则进行解算,并进行相应的处理,从而筛选出前方车辆,剔除掉无效目标;C、对步骤B中接收到的毫米波雷达数据进行滤波,利用卡尔曼滤波对前方车辆进行跟踪,并生成轨迹对其进行编号;当有新的车辆出现时,通过雷达采集到的数据解算确定后,进行跟踪生成新的轨迹并添加编号;D、对摄像机采集到的图像进行预处理;E、离线训练深度学习神经网络,对前方车辆进行识别;F、将步骤D中已经进行了预处理的图像送入到步骤D预训练的深度学习神经网络中去,对前方的车辆目标进行检测和定位,得出前方多车辆在图像中的位置及检测可信度(对可信度低于M%的车辆信号删除),并将车辆进行编号;G、利用在线跟踪模型对步骤F中检测到的车辆进行跟踪并生成车辆的运行轨迹并编号;H、毫米波雷达与摄像机的数据处理中心分别将本地轨道发送到数据融合中心,并由融合中心通过对毫米波雷达与摄像机输出数据的距离和坐标关系进行数据融合,基于毫米波雷达和摄像机的轨道执行轨道相关;I、重复进行以上步骤,并进行轨道更新,得出跟踪结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于吉林大学,未经吉林大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/201811219589.9/,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top