[发明专利]一种夜间智能辅助驾驶系统及方法有效
申请号: | 201811491509.5 | 申请日: | 2018-12-07 |
公开(公告)号: | CN109552319B | 公开(公告)日: | 2023-07-25 |
发明(设计)人: | 王衍圣;王春燕;赵万忠;钱兴国;鲁广超;吴刚;施帅朋;颜伸翔;冯健 | 申请(专利权)人: | 南京航空航天大学 |
主分类号: | B60W30/08 | 分类号: | B60W30/08;B60W40/105;B60W50/14 |
代理公司: | 江苏圣典律师事务所 32237 | 代理人: | 贺翔 |
地址: | 210016 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 夜间 智能 辅助 驾驶 系统 方法 | ||
1.一种夜间智能辅助驾驶系统的辅助方法,所述夜间智能辅助驾驶系统包含前视摄像头、毫米波雷达、速度传感器、AR-HUD模块和电子控制单元;
所述前视摄像头设置在车辆挡风玻璃的正上方,用于拍摄车辆正前方的道路图像,并将其传递给所述电子控制单元;
所述毫米波雷达设置在车辆进气格栅中央,用于感应车辆所在车道以及相邻车道中各个障碍物的信息,并将其传递给所述电子控制单元;所述障碍物的信息包含:障碍物的雷达坐标、障碍物和车辆的相对速度、障碍物的横向宽度和障碍物的垂向高度;
所述速度传感器用于感应车辆的速度,并将其传递给所述电子控制单元;
所述电子控制单元分别和前视摄像头、毫米波雷达、速度传感器、AR-HUD模块电气相连,用于根据前视摄像头、毫米波雷达、速度传感器的感应数据绘制障碍物投影图,并控制所述AR-HUD模块将障碍物投影图投影至车辆挡风玻璃上;
其特征在于,所述夜间智能辅助驾驶系统的辅助方法包含以下步骤:
步骤1),毫米波雷达接收到车辆所在车道以及相邻车道中各个障碍物Qn的信息并将其传递给电子控制单元;
步骤2),前视摄像头拍摄车辆正前方的道路图像,并将其传递给所述电子控制单元;
步骤3),速度传感器测得当前车辆的速度,并将其传递给所述电子控制单元;
步骤4),对于每个障碍物,电子控制单元根据障碍物和本车的相对速度以及车辆的速度计算得到障碍物的速度,并将障碍物的速度分别和与预设的行人速度阈值范围、预设的车辆速度阈值范围进行匹配,将障碍物的横向宽度分别和预设的行人宽度阈值范围、车辆宽度阈值范围进行匹配,将障碍物的垂向高度分别和预设的行人高度阈值范围、车辆高度阈值范围进行匹配;
步骤4.1),如果障碍物的速度在预设的行人速度阈值范围内、横向宽度在预设的行人宽度阈值范围内、垂向高度在预设的行人高度阈值范围内,则将该障碍物标记为行人障碍;
步骤4.2),如果障碍物的速度在预设的车辆速度阈值范围内、横向宽度在预设的车辆宽度阈值范围内、垂向高度在预设的车辆高度阈值范围内,则将该障碍物标记为车辆障碍;
步骤4.3),如果障碍物不能被标记为行人障碍、且不能被标记为车辆障碍,则将其标记为未知障碍;
步骤5),电子控制单元根据毫米波雷达和前视摄像头的位置关系将各个障碍物的雷达坐标、横向宽度和垂向高度分别转换为前视摄像头拍摄的道路图像上的坐标、宽度和高度,并根据障碍物在道路图像上的坐标、宽度和高度获得障碍物在道路图像上的矩形图,所述矩形图的中心为障碍物在道路图像上的坐标、宽度和高度分别是障碍物在道路图像上的宽度和高度;
步骤6),电子控制单元对各个障碍物在道路图像上的矩形图进行图像校核:
步骤6.1),电子控制单元将各个障碍物的矩形图转换为灰度图;
步骤6.2),对于标记为行人障碍的障碍物,电子控制单元将其灰度图和预设的行人图像模板库中的各个行人图像模板进行比对,如果行人图像模板库中不存在和障碍物灰度图匹配成功的行人图像模板,将该障碍物由行人障碍更改为未知障碍;
其中,电子控制单元将障碍物的灰度图和预设的行人图像模板库中的各个行人图像模板进行比对的具体步骤如下:
令障碍物灰度图的像素为M×N;
步骤A.1),将行人图像模板的像素调整至M×N;
步骤A.2),对于每一个需要进行对比的行人图像模板:
步骤A.2.1),根据以下公式计算障碍物灰度图中每个像素点和行人图像模板中对应像素点的绝对误差G(s):
式中,S(s,t)为障碍物灰度图中像素点的坐标,Tn(s,t)为行人图像模板中对应像素点的坐标,
步骤A.3),将障碍物灰度图中每个像素点的G(s)和预设的误差阈值Th进行比较,得到障碍物灰度图中G(s)≥Th的像素点个数R;
步骤A.4),将和预设的匹配灵敏度Y进行比较,如果认为该行人图像模板Tn和障碍物灰度图S匹配成功,否则认为匹配失败;
步骤6.3),对于标记为车辆障碍的障碍物,电子控制单元将其灰度图和预设的车辆图像模板库中的各个车辆图像模板进行比对,如果车辆图像模板库中不存在和障碍物灰度图匹配成功的车辆图像模板,将该障碍物由车辆障碍更改为未知障碍;
步骤7),电子控制单元根据毫米波雷达和前视摄像头的位置关系、以及各个障碍物的雷达坐标计算出各个障碍物在垂直于车辆行驶方向上和车辆之间的距离D;
如果障碍物的距离D在预设的第一距离阈值范围内,认为该障碍物和车辆在同一车道;
如果障碍物的距离D在预设的第二阈值范围内,认为该障碍物在车辆的相邻车道,所述预设的第二阈值范围的最小值等于预设的第一距离阈值范围的最大值;
步骤8),电子控制单元对各个障碍物进行分级:
步骤8.1),对于各个被标记为未知障碍的障碍物:如果障碍物和车辆在同一车道,将其记录为警示级;如果障碍物在车辆的相邻车道且障碍物的速度大于零,将其记录为警示级;如果障碍物在车辆的相邻车道且障碍物的速度等于零,将其记录为注意级;否则,将其记录为普通级;
步骤8.2),对于各个被标记为车辆障碍的障碍物:如果障碍物和车辆的相对速度小于零且障碍物和车辆在同一车道,将其记录为警示级;如果障碍物和车辆的相对速度小于零且障碍物在车辆的相邻车道,将其记录为注意级;否则,将其记录为普通级;
步骤8.3),对于各个被标记为行人障碍的障碍物:如果障碍物和车辆在同一车道,将其记录为警示级;如果障碍物在车辆的相邻车道且障碍物的速度不为零时,将其记录为警示级;如果障碍物在车辆的相邻车道且障碍物的速度为零时,将其记录为注意级;否则,将其记录为普通级;
步骤9),在道路图像上对各个障碍物的矩形图的轮廓进行突出显示,形成障碍物投影图:将记录为普通级的障碍物的矩形图轮廓显示为白色,将记录为注意级的障碍物的矩形图轮廓显示为蓝色,将记录为警示级的障碍物的矩形图轮廓显示为黄色;
步骤10),电子控制单元控制所述AR-HUD模块将障碍物投影图投影至车辆挡风玻璃上。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京航空航天大学,未经南京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811491509.5/1.html,转载请声明来源钻瓜专利网。