[发明专利]一种多目标位姿实时在线估计方法、系统、设备及介质在审

专利信息
申请号: 202310073055.4 申请日: 2023-01-17
公开(公告)号: CN116012450A 公开(公告)日: 2023-04-25
发明(设计)人: 李森;胡玉龙;刘品;陈皓;李珂;唐艺菁 申请(专利权)人: 西安微电子技术研究所
主分类号: G06T7/73 分类号: G06T7/73;G06T7/246;G06V20/17;G06V10/82;G06V10/74;G06N3/0464;G06N3/08
代理公司: 西安通大专利代理有限责任公司 61200 代理人: 姚咏华
地址: 710065 陕西*** 国省代码: 陕西;61
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 多目标 实时 在线 估计 方法 系统 设备 介质
【权利要求书】:

1.一种多目标位姿实时在线估计方法,其特征在于,包括以下步骤:

S1:从不同高度及角度采集航拍车辆图像,并标注图像中的车头及车辆,生成航拍车辆训练集,并对航拍车辆训练集进行训练,生成目标检测模型;

S2:对目标检测模型进行轻量化,并将轻量化后的目标检测模型部署在GPU嵌入式开发板上;

S3:将搭载有云台摄像机的GPU嵌入式开发板安装在无人机上,获取航拍图像,并将获取到的航拍图像输入到轻量化后的目标检测模型,获得目标检测结果;

S4:根据目标检测结果分别计算车头和车辆检测框的重叠率,实现车辆和对应车头的关联,然后连接车辆和车头的质心,计算车辆的姿态角;

S5:根据目标检测结果,以欧氏距离作为相邻帧目标间的相似度度量,建立关联矩阵,求解全局最优匹配,对最优匹配结果进行筛选,得到目标跟踪结果,将目标跟踪结果与车辆姿态角进行匹配,获得目标的实时位姿。

2.根据权利要求1所述的一种多目标位姿实时在线估计方法,其特征在于,S1中采用YOLOv5s网络对航拍车辆训练集进行训练。

3.根据权利要求1所述的一种多目标位姿实时在线估计方法,其特征在于,目标检测模型的轻量化是对目标检测模型进行压缩和优化。

4.根据权利要求1所述的一种多目标位姿实时在线估计方法,其特征在于,车头和车辆检测框的重叠率计算公式为:

其中,分别为车头i和车辆j的检测框的面积。

5.根据权利要求1所述的一种多目标位姿实时在线估计方法,其特征在于,车辆姿态角的计算公式为:

其中,(x1,y1)和(x2,y2)分别为车头和车辆的质心坐标。

6.根据权利要求1所述的一种多目标位姿实时在线估计方法,其特征在于,关联矩阵为:

其中,表示第t帧中检测到的第i个车辆,M和N分别表示第t帧和第t+1帧中检测出来的目标个数,表示车辆之间的欧氏距离。

7.根据权利要求1所述的一种多目标位姿实时在线估计方法,其特征在于,求解全局最优匹配采用匈牙利算法。

8.一种多目标位姿实时在线估计系统,基于权利要求1-7任一所述一种多目标位姿实时在线估计方法,其特征在于,包括:

训练集模块:用于从不同高度及角度采集航拍车辆图像,并标注图像中的车头及车辆,生成航拍车辆训练集,并对航拍车辆训练集进行训练,生成模型;

部署模块:用于对目标检测模型进行轻量化,并将轻量化后的目标检测模型部署在GPU嵌入式开发板上;

检测模块:将搭载有云台摄像机的GPU嵌入式开发板安装在无人机上,获取航拍图像,并将获取到的航拍图像输入到轻量化后的目标检测模型,获得目标检测结果;

计算模块:用于根据目标检测结果分别计算车头和车辆检测框的重叠率,实现车辆和对应车头的关联,然后连接车辆和车头的质心,计算车辆的姿态角;

位姿获取模块:用于根据目标检测结果,以欧氏距离作为相邻帧目标间的相似度度量,建立关联矩阵,求解全局最优匹配,对最优匹配结果进行筛选,得到目标跟踪结果,将目标跟踪结果与车辆姿态角进行匹配,获得目标的实时位姿。

9.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述一种多目标位姿实时在线估计方法的步骤。

10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述一种多目标位姿实时在线估计方法的步骤。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安微电子技术研究所,未经西安微电子技术研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202310073055.4/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top