[发明专利]一种基于空间映射学习的非合作目标姿态估计方法有效

专利信息
申请号: 202111225153.2 申请日: 2021-10-21
公开(公告)号: CN113706619B 公开(公告)日: 2022-04-08
发明(设计)人: 李爽;胡茄乾;杨彬;黄旭星;刘旭 申请(专利权)人: 南京航空航天大学
主分类号: G06T7/73 分类号: G06T7/73;G06N3/08
代理公司: 江苏圣典律师事务所 32237 代理人: 徐晓鹭
地址: 211106 江*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 空间 映射 学习 合作 目标 姿态 估计 方法
【权利要求书】:

1.一种基于空间映射学习的待预测物体姿态估计方法,其特征在于,所述方法包括以下步骤:

S1,通过模拟相机和激光雷达对待预测物体进行联合成像,采集对齐的点云数据和RGB图像数据,所述RGB图像数据获取过程如下:S11,建立模拟待预测物体的三维模型,在其机体上的相应位置设置对应的材料,然后添加光源和相机,模拟空间待预测物体的成像环境;

S12,控制相机光轴指向坐标系原点,控制相机不动、待预测物体模型中心位置保持在坐标系原点,将所述三维模型绕三轴依次旋转并制作动画,并且所述三维模型每旋转相同角度拍摄一张照片,以获取待预测物体不同姿态的RGB图像;

S2,建立数据集,训练基于区域的神经网络,根据RGB图像数据得到物体的类别标签、实例掩膜、彩色标签,其中彩色标签用于标识待预测物体的外形和尺寸;所述彩色标签通过以下过程获得:

S21,对所述S1中获取的待预测物体的RGB图像,构建局部特征的分割标签和类别标签;

S22,制作局部特征逐一像素渐变的彩色三维模型,并根据所述S1中获取的待预测物体RGB图像对应的姿态进行成像,以获得局部特征的彩色标签;

利用实例掩膜结合步骤S1中的测量点云数据点云获得局部特征的测量点云数据,获得所述待预测物体局部特征三维点云数据P,利用彩色标签重构局部特征三维点云模型,获得点云数据Q;

S3,求取获得的点云数据P和Q之间的缩放比,利用迭代最近点法对齐预测三维模型与点云,获得待预测物体的姿态。

2.根据权利要求1所述的一种基于空间映射学习的待预测物体姿态估计方法,其特征在于,所述S1中点云和图像数据获取过程还包含:

S13,将所述待预测物体的动画以及成像场景复制到点云仿真软件中,将相机替换为激光雷达,重复所述S12的过程,以获得待预测物体不同姿态下的点云数据,即模拟了相机和激光雷达的联合成像;

S14,控制相机在光轴上移动,重复所述步骤S11至S13,即可获得不同距离的成像结果。

3.根据权利要求2所述的一种基于空间映射学习的待预测物体姿态估计方法,其特征在于,所述S2具体还包括:

S23,所述S21以及S22中的RGB图像和标签随机选取80%作为训练集,剩下的作为测试集,利用训练集训练基于区域的神经网络,利用测试集测试网络的泛化性能和准确性;

S24,采集待预测物体的图像,输入到所述S23中训练的神经网络,预测所述待预测物体局部类特征的类别标签、实例掩膜、彩色标签;

S25,根据局部特征实例掩膜结合所述S1中获得的点云数据,获得所述待预测物体局部特征三维点云数据P,根据所述彩色标签得到局部特征三维模型获得点云数据Q。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京航空航天大学,未经南京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111225153.2/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top