[发明专利]一种前方车辆检测方法及检测系统在审
申请号: | 201910876938.2 | 申请日: | 2019-09-17 |
公开(公告)号: | CN110738121A | 公开(公告)日: | 2020-01-31 |
发明(设计)人: | 张娟;马忠贵 | 申请(专利权)人: | 北京科技大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
代理公司: | 11237 北京市广友专利事务所有限责任公司 | 代理人: | 张仲波 |
地址: | 100083*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 点云数据 前方车辆 标签类别 图像 计算机视觉领域 感兴趣区域 视觉传感器 特征提取器 车辆检测 激光雷达 检测系统 类别检测 区域生成 三维检测 特征提取 融合 像素级 映射 输出 检测 网络 | ||
1.一种前方车辆检测方法,其特征在于,包括:
通过激光雷达和视觉传感器分别获取前方车辆的点云数据和图像,并获取点云数据和图像中目标的标签类别;
利用特征提取器对获取的点云数据和图像进行特征提取,将提取的特征进行像素级映射融合;
利用融合后的特征及目标的标签类别对双区域生成网络进行训练,生成感兴趣区域并进行类别检测,输出前方车辆的三维检测结果。
2.根据权利要求1所述的前方车辆检测方法,其特征在于,所述方法还包括:获取图像的地平面基准文件和激光雷达到相机的标定信息。
3.根据权利要求2所述的前方车辆检测方法,其特征在于,所述利用特征提取器对获取的点云数据和图像进行特征提取,将提取的特征进行像素级映射融合包括:
利用编解码的特征金字塔网络对获取的点云数据和图像进行特征提取,分别提取激光雷达的俯瞰特征图和图像特征图;
根据获取的图像的地平面基准文件和激光雷达到相机的标定信息,将提取的激光雷达的俯瞰特征图和图像特征图使用6尺度的三维锚框进行点云数据和图像的像素级映射融合。
4.根据权利要求3所述的前方车辆检测方法,其特征在于,所述6尺度包括:点云坐标下3种不同的尺寸和3种不同的角度。
5.根据权利要求1所述的前方车辆检测方法,其特征在于,在训练双区域生成网络时,使用基于定位置信度的相对熵回归损失函数同时学习边界框回归和定位的不确定性。
6.一种前方车辆检测系统,其特征在于,包括:
获取模块,用于获取前方车辆的点云数据和图像,并获取点云数据和图像中目标的标签类别,其中,所述获取模块包括:激光雷达和视觉传感器;
处理模块,用于利用特征提取器对获取的点云数据和图像进行特征提取,将提取的特征进行像素级映射融合;
检测模块,用于利用融合后的特征及目标的标签类别对双区域生成网络进行训练,生成感兴趣区域并进行类别检测,输出前方车辆的三维检测结果。
7.根据权利要求6所述的前方车辆检测系统,其特征在于,所述获取模块,还用于获取图像的地平面基准文件和激光雷达到相机的标定信息。
8.根据权利要求7所述的前方车辆检测系统,其特征在于,所述处理模块包括:
提取单元,用于利用编解码的特征金字塔网络对获取的点云数据和图像进行特征提取,分别提取激光雷达的俯瞰特征图和图像特征图;
融合单元,用于根据获取的图像的地平面基准文件和激光雷达到相机的标定信息,将提取的激光雷达的俯瞰特征图和图像特征图使用6尺度的三维锚框进行点云数据和图像的像素级映射融合。
9.根据权利要求8所述的前方车辆检测系统,其特征在于,所述6尺度包括:点云坐标下3种不同的尺寸和3种不同的角度。
10.根据权利要求6所述的前方车辆检测系统,其特征在于,在训练双区域生成网络时,使用基于定位置信度的相对熵回归损失函数同时学习边界框回归和定位的不确定性。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京科技大学,未经北京科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910876938.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:环境数据调整方法及装置、电子设备及介质
- 下一篇:一种数据核查方法及装置
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序