[发明专利]一种基于深度学习的目标姿态估计方法在审

专利信息
申请号: 202010567365.8 申请日: 2020-06-19
公开(公告)号: CN111784731A 公开(公告)日: 2020-10-16
发明(设计)人: 李湛;李海;杨学博;王大钊;刘金泽;高会军 申请(专利权)人: 哈尔滨工业大学
主分类号: G06T7/207 分类号: G06T7/207;G06T7/50
代理公司: 哈尔滨市松花江专利商标事务所 23109 代理人: 董玉娇
地址: 150001 黑龙*** 国省代码: 黑龙江;23
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 深度 学习 目标 姿态 估计 方法
【权利要求书】:

1.一种基于深度学习的目标姿态估计方法,其特征在于,该方法包括如下过程:

步骤一、利用运动捕捉系统及挂载在无人机上的单目相机,采集N组数据信息,其中,N组数据信息构成标注完成的数据集;N为整数,且10000<N<100000;

每组数据信息中包括:同一时刻下的无人机上的单目相机采集的目标物体图像信息和运动捕捉系统获得的目标物体坐标系三轴相对于无人机坐标系三轴的实际相对姿态偏移信息,且同一时刻下的目标物体图像信息与目标物体坐标系三轴相对于无人机坐标系三轴的实际相对姿态偏移信息存在映射关系;

无人机坐标系三轴分别为X′、Y′和Z′,且无人机的质心定义为原点;

X′轴的方向为无人机所在平面内机头所指的方向;

Y′轴的方向为无人机所在平面内垂直于机头向左方向;

Z′轴的方向为垂直于无人机所在平面向上的方向;

目标物体坐标系三轴分别为X、Y和Z,目标物体的质心定义为原点;

X轴的方向为目标物体所在平面内任意指向方向;

Y轴的方向为目标物体所在平面内垂直于X轴向左的方向;

Z轴的方向为垂直于目标物体所在平面向上的方向;

步骤二、利用标注完成的数据集对初始深度学习网络模型进行训练,获得训练后的深度学习网络模型;

步骤三、再通过无人机上的单目相机,获得待估计的含有目标物体的图像信息;

步骤四、将待估计的含有目标物体的图像信息发送至训练后的深度学习网络模型,从而获得目标物体相对于无人机的姿态信息的估计值。

2.根据权利要求1所述的一种基于深度学习的目标姿态估计方法,其特征在于,步骤一中,同一时刻下的无人机上的单目相机采集的目标物体图像信息和运动捕捉系统获得的目标物体坐标系三轴相对于无人机坐标系三轴的实际相对姿态偏移信息的具体过程为:

首先,在无人机和目标物体上均贴上标识小球,且无人机和目标物体均处于运动捕捉系统捕捉范围之内;

其次,通过无人机上的单目相机采集目标物体图像信息,同时通过设置在无人机和目标物体上方的运动捕捉系统对无人机和目标物体上的标识小球进行识别,从而获得无人机和目标物体的当前姿态信息,并根据无人机和目标物体的当前姿态信息,获得目标物体坐标系三轴相对于无人机坐标系三轴的实际相对姿态偏移信息。

3.根据权利要求1所述的一种基于深度学习的目标姿态估计方法,其特征在于,步骤二中,初始深度学习网络模型为残差网络模型。

4.根据权利要求1所述的一种基于深度学习的目标姿态估计方法,其特征在于,步骤二中,正在被训练的深度学习网络模型的损失函数Loss的值为:

其中,

Xanglei表示第i组数据中的目标物体坐标系下的X轴相对于无人机坐标系下的X′轴间夹角的实际值;i为整数,i=1,2,3……N;

表示训练第i组数据时,正在被训练的深度学习网络模型所估计的目标物体坐标系下的X轴相对于无人机坐标系下的X′轴间夹角的估计值;

Yanglei表示第i组数据中的目标物体坐标系下的Y轴相对于无人机坐标系下的Y′轴间夹角的实际值;

表示训练第i组数据时,正在被训练的深度学习网络模型所估计的目标物体坐标系下的Y轴相对于无人机坐标系下的Y′轴间夹角的估计值;

Zanglei表示第i组数据中的目标物体坐标系下的Z轴相对于无人机坐标系下的Z′轴间夹角的实际值;

表示训练第i组数据时,正在被训练的深度学习网络模型所估计的目标物体坐标系下的Z轴相对于无人机坐标系下的Z′轴间夹角的估计值;

lossXangle表示目标物体坐标系下的X轴相对于无人机坐标系下的X′轴间夹角的实际值与估计值间的偏差;

lossYangle表示目标物体坐标系下的Y轴相对于无人机坐标系下的Y′轴间夹角的实际值与估计值间的偏差;

lossZangle表示目标物体坐标系下的Z轴相对于无人机坐标系下的Z′轴间夹角的实际值与估计值间的偏差。

5.根据权利要求1所述的一种基于深度学习的目标姿态估计方法,其特征在于,运动捕捉系统采用OptiTrack系统实现。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工业大学,未经哈尔滨工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010567365.8/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top