[发明专利]一种无需后处理操作的3D目标检测方法有效

专利信息
申请号: 202110276978.0 申请日: 2021-03-15
公开(公告)号: CN113052031B 公开(公告)日: 2022-08-09
发明(设计)人: 刘子立;蔡登;徐国栋;杨鸿辉;何晓飞 申请(专利权)人: 浙江大学
主分类号: G06V20/64 分类号: G06V20/64;G06V10/774;G06K9/62
代理公司: 杭州天勤知识产权代理有限公司 33224 代理人: 彭剑
地址: 310013 浙江*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 无需 处理 操作 目标 检测 方法
【说明书】:

发明公开了一种无需后处理操作的3D目标检测方法,包括:(1)初始化K个3D候选框和1个物体嵌入特征;(2)对输入的点云样本进行特征提取,得到点特征;(3)在点特征上提取K个3D候选框特征;(4)使用物体嵌入特征对3D候选框特征进行筛选和提取,得到K个特征;(5)使用自注意力模型让K个特征交换特征信息,得到K个提议特征;(6)根据提议特征预测K个预测结果,并与标注信息一对一匹配后训练;(7)用步骤(6)预测的K个预测结果的3D候选框替代步骤(1)的K个3D候选框,用步骤(5)得到的特征提议替代步骤(1)的物体嵌入;重复步骤(3)~(7)多次得到检测结果。本发明可以解决现有3D目标检测器存在冗余预测的问题。

技术领域

本发明属于计算机视觉领域,尤其是涉及一种无需后处理操作的3D 目标检测方法。

背景技术

3D目标检测是一项广泛应用于无人驾驶、室内物体检测、机器人导航等的技术。3D目标检测任务的输入为点云数据,输出的预测结果包括 3D框的位置,3D框中物体的类别,以及3D框的置信度。

近年来3D目标检测器的检测精度有了大幅提升,其中典型的工作包括:《DeepHough Voting for 3D Object Detection in Point Clouds》,《A Hierarchical GraphNetwork for 3D Object Detection on Point Clouds》,《H3dnet:3d object detectionusing hybrid geometric primitives》,《Mlcvnet: Multi-level context votenet for3d object detection》。

然而,这些检测器的预测结果都存在大量的冗余(即一个物体会被重复检测到多次)。因此,这些检测器需要额外的后处理操作来去掉冗余的检测框。然而,这些后处理操作常常会花费大量时间,阻碍了3D目标检测器的实时应用。

3D物体检测器的训练流程可以概括为:输入一个点云样本,检测器产生K个预测结果(即3D框的位置,3D框中物体的类别,以及3D框的置信度)。随后,根据标注信息(即真实的3D框位置和3D框中物体的类别)来评估模型预测的K个结果,从而训练模型。

现有的3D目标检测器之所以会产生冗余的检测,是因为在评估模型预测的K个结果时采用的是“一对多”的匹配策略,即可能模型预测的多个结果会匹配同一个真实的物体。这种策略导致模型无法分辨其预测的结果是否存在冗余。

除了3D目标检测,2D目标检测领域同样存在上述“预测结果存在冗余”的问题。近期,2D目标检测领域出现了一批方法来解决该问题。但是,相比2D目标检测是在2D图像中检测物体,3D目标检测需要在3D 空间中检测物体。由于后者的搜索空间更大,因此2D目标检测领域的解决方案是否能用于3D目标检测依然是个疑问。

因此,需要设计一种新的3D目标检测方法,在检测过程中可以避免产生冗余的检测,使得在评估模型预测的K个结果时采用“一对一”的匹配策略,即每个真实的物体仅匹配一个模型产生的结果。这种策略使模型可以分辨冗余的预测结果。然而,目前主流的3D目标检测器在结构上并不适应这种策略。

发明内容

本发明提供了一种无需后处理操作的3D目标检测方法,引入“一对一”的分配策略,同时采用新的结构来解决检测结果存在冗余的问题。

一种无需后处理操作的3D目标检测方法,包括以下步骤:

(1)在目标区域内,初始化K个3D候选框和1个物体嵌入特征;

(2)对输入的点云样本进行特征提取,得到点特征V;

(3)在点特征V上提取K个3D候选框的特征;

(4)使用物体嵌入特征对K个3D候选框的特征进一步进行筛选和提取,得到K个特征F∈RK×C

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110276978.0/2.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top