[发明专利]障碍物的识别方法和装置、存储介质、电子装置有效
申请号: | 201811245582.4 | 申请日: | 2018-10-24 |
公开(公告)号: | CN110147706B | 公开(公告)日: | 2022-04-12 |
发明(设计)人: | 陈仁;孙银健 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06V20/58 | 分类号: | G06V20/58;G06V10/774;G06V10/82;G06K9/62 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 周婷婷;江舟 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 障碍物 识别 方法 装置 存储 介质 电子 | ||
1.一种障碍物的识别方法,其特征在于,包括:
在目标车辆自动行驶的过程中,获取点云数据,其中,所述点云数据为所述目标车辆上的传感器对所述目标车辆的行驶环境进行扫描得到的;
将所述点云数据转换为用于表示所述行驶环境的第一图像,其中,将所述点云数据转换为用于表示所述行驶环境的第一图像包括:根据所述点云数据确定所述行驶环境的距离视图、高度视图以及强度视图,其中,所述距离视图中像素点的像素值用于指示该像素点与所述传感器之间的距离,所述高度视图中像素点的像素值用于指示该像素点与所述传感器之间的高度差,所述强度视图中像素点的像素值用于指示该像素点对所述传感器的扫描信号的反射强度;根据所述距离视图中像素点的像素值、所述高度视图中像素点的像素值和所述强度视图中像素点的像素值确定所述第一图像中的各色彩通道的取值;
通过第一神经网络模型从所述第一图像中识别出位于所述行驶环境中的第一对象,其中,所述第一神经网络模型是利用标识有第二对象的第二图像对第二神经网络模型进行训练得到的,所述第一对象和所述第二对象为可移动的障碍物。
2.根据权利要求1所述的方法,其特征在于,根据所述点云数据确定所述行驶环境的距离视图、高度视图以及强度视图包括:
将所述点云数据投影至目标柱体的侧面,其中,所述目标柱体以传感器为中心;
保留位于所述目标柱体的侧面的所述点云数据中的距离信息,并对所述目标柱体的侧面进行截图,得到所述行驶环境的距离视图,保留位于所述目标柱体的侧面的所述点云数据中的高度信息,并对所述目标柱体的侧面进行截图,得到所述行驶环境的高度视图,保留位于所述目标柱体的侧面的所述点云数据中的反射强度信息,并对所述目标柱体的侧面进行截图,得到所述行驶环境的强度视图。
3.根据权利要求1所述的方法,其特征在于,根据所述距离视图中像素点的像素值、所述高度视图中像素点的像素值和所述强度视图中像素点的像素值确定所述第一图像中的各色彩通道的取值包括:
将所述距离视图中像素点的像素值作为所述第一图像中相同位置的像素点的第一通道的取值,将所述高度视图中像素点的像素值作为所述第一图像中相同位置的像素点的第二通道的取值,并将所述强度视图中像素点的像素值作为所述第一图像中相同位置的像素点的第三通道的取值,以确定所述第一图像。
4.根据权利要求1至3中任意一项所述的方法,其特征在于,通过第一神经网络模型从所述第一图像中识别出位于所述行驶环境中的第一对象包括:
将所述第一图像的第一通道的取值、第二通道的取值以及第三通道的取值作为所述第一神经网络模型的输入;
通过所述第一神经网络模型对所述第一图像中的所述行驶环境进行对象识别,从而得到所述第一对象,其中,所述对象识别包括从所述行驶环境识别出与学习到的所述可移动的障碍物的特征匹配的所述第一对象;
获取所述第一神经网络模型输出的用于表示所述第一对象的输出结果。
5.根据权利要求1至3中任意一项所述的方法,其特征在于,在通过第一神经网络模型从所述第一图像中识别出位于所述行驶环境中的第一对象之前,所述方法还包括:
通过训练集中的所述第二图像对所述第二神经网络模型进行训练来初始化所述第二神经网络模型中各个网络层的权重参数,得到第三神经网络模型;
在所述第三神经网络模型对测试集的图片中第三对象的识别准确率达到第一阈值的情况下,将所述第三神经网络模型作为所述第一神经网络模型;
在所述第三神经网络模型对所述测试集的图片中所述第三对象的识别准确率未达到所述第一阈值的情况下,继续使用所述训练集中的所述第二图像对所述第三神经网络模型进行训练,直至所述第三神经网络模型对所述测试集的图片中所述第三对象的识别准确率达到所述第一阈值。
6.根据权利要求1至3中任意一项所述的方法,其特征在于,在通过第一神经网络模型从所述第一图像中识别出位于所述行驶环境中的第一对象之后,所述方法还包括:
将距离视图中位置与所述第一图像中所述第一对象所在位置相同的像素点的像素值作为所述第一对象与所述目标车辆之间的间隔距离;
根据所述间隔距离控制所述目标车辆。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811245582.4/1.html,转载请声明来源钻瓜专利网。