[发明专利]自主机器应用中的路口姿态检测在审

专利信息
申请号: 202080031631.3 申请日: 2020-04-14
公开(公告)号: CN113785302A 公开(公告)日: 2021-12-10
发明(设计)人: T·彭;窦航;B·罗德里格斯·赫尔瓦斯;M·帕克;N·茨维耶蒂奇;D·尼斯特 申请(专利权)人: 辉达公司
主分类号: G06K9/00 分类号: G06K9/00;G06K9/46;G06N3/02;G06N3/08;G06N20/00
代理公司: 北京市磐华律师事务所 11336 代理人: 高伟
地址: 美国加利*** 国省代码: 暂无信息
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 自主 机器 应用 中的 路口 姿态 检测
【权利要求书】:

1.一种方法,包括:将表示车辆的图像传感器的视场中的路口的图像数据应用于神经网络;使用所述神经网络并且至少部分地基于所述图像数据来计算第一数据和第二数据,所述第一数据表示一个或更多个二维(2D)热图,所述一个或更多个二维2D热图表示与所述路口相对应的关键点的位置,所述第二数据表示对应于所述关键点的分类置信度值;对所述一个或更多个2D热图进行解码以确定所述图像中的所述关键点的像素位置;从所述分类置信度值确定对应于所述关键点的关联分类;至少部分地基于所述像素位置和所述关联分类,生成通过所述路口的一条或更多条建议的路径;以及由所述车辆使用所述一条或更多条建议的路径执行一个或更多个操作。

2.根据权利要求1所述的方法,其中所述关联分类表示以下项中的一项或更多项:人行横道的入口点、所述路口的入口点、所述路口的出口点、人行横道的出口点或自行车道。

3.根据权利要求1所述的方法,其中所述2D热图包括未归一化的正态分布,并且其中所述2D热图包括固定标准偏差或自适应协方差之一。

4.根据权利要求1所述的方法,其中,对所述2D热图进行解码包括:执行峰值寻找算法以确定峰值概率像素,所述峰值概率像素对应于所述关键点。

5.根据权利要求1所述的方法,还包括:接收与所述车辆通过所述路口的建议的操控相对应的第三数据,其中所述一个或更多个操作包括至少部分地基于所述第三数据来选择所述一条或更多条建议的路径中的至少一个。

6.根据权利要求1所述的方法,还包括:使用所述神经网络计算第三数据,所述第三数据表示与对应于所述关键点的线段的方向性或对应于所述关键点的车道的航向方向中的一个或更多个相对应的一个或更多个向量场;以及至少部分地基于所述第三数据和所述关键点的所述像素位置,对所述一个或更多个向量场进行解码,以确定所述方向性或所述航向方向中的一个或更多个。

7.根据权利要求6所述的方法,其中所述生成一条或更多条建议的路径还至少部分地基于所述方向性或所述航向方向中的一个或更多个。

8.根据权利要求1所述的方法,还包括:使用所述神经网络计算表示与所述路口相关联的车道的宽度相对应的强度图的第三数据;以及至少部分地基于所述第三数据和所述关键点的所述像素位置,解码所述强度图以确定所述车道的所述宽度。

9.根据权利要求1所述的方法,其中所述一条或更多条建议的路径包括用于使所述车辆横穿所述路口的左转弯、右转弯和直路径中的至少一个。

10.根据权利要求1所述的方法,还包括:使用所述神经网络计算表示偏移向量场的第三数据,其中对所述2D热图进行解码还至少部分地基于所述偏移向量场。

11.根据权利要求1所述的方法,其中生成所述一条或更多条建议的路径包括:执行曲线拟合算法以确定从所述关键点中的第一关键点到所述关键点中的第二关键点的轨迹。

12.一种方法,包括:接收表示路口的图像数据;接收表示对应于所述路口内的线段的注释的第一数据以及对应于所述线段的分类的第二数据;至少部分地基于所述线段确定对应于所述线段的关键点的位置;将所述关键点编码到高斯热图;以及使用所述高斯热图和所述分类作为地面实况数据来训练神经网络。

13.根据权利要求12所述的方法,其中确定所述关键点的所述位置包括:识别对应于所述线段的纵向中心的像素。

14.根据权利要求13所述的方法,还包括:编码一个或更多个向量场,所述一个或更多个向量场对应于所述线段的方向性或对应于所述线段的车道的航向方向中的一个或更多个,其中训练所述神经网络进一步使用所述一个或更多个向量场。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于辉达公司,未经辉达公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202080031631.3/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top