[发明专利]一种多目标跟踪方法在审

专利信息
申请号: 202111479787.0 申请日: 2021-12-06
公开(公告)号: CN116310921A 公开(公告)日: 2023-06-23
发明(设计)人: 窦磊;王广玉;叶英杰 申请(专利权)人: 南京理工大学
主分类号: G06V20/40 分类号: G06V20/40;G06V10/762;G06V10/82;G06N3/082
代理公司: 暂无信息 代理人: 暂无信息
地址: 210094 江苏省南*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 多目标 跟踪 方法
【说明书】:

发明提出了一种多目标跟踪方法,包括以下步骤:步骤一:构建视频样本数据集;步骤二:在YOLOV3网络模型中引入注意力机制模块,构建多目标检测模型;步骤三:基于样本数据集对检测模型进行基础训练、稀疏训练、通道剪枝、层剪枝和微调,得到优化后的多目标检测模型;步骤四:将待检测视频数据输入优化后的多目标检测模型,输出检测结果,即包括检测框的视频帧序列;步骤五:根据检测结果进行多目标跟踪。本发明运行速度更快,能达到实时检测的要求且鲁棒性更好。

技术领域

本发明属于目标跟踪领域,具体涉一种轻量级且高鲁棒的多目标跟踪方法。

背景技术

目标跟踪是计算机视觉领域研究的热点之一,可分为单目标跟踪与多目标跟踪。多目标跟踪算法的主要任务是对众多目标同时进行跟踪,并为每个目标分配并维持一个相应的ID,记录轨迹。随着深度学习在目标检测等计算机视觉领域中的成功应用,深度学习中的技术如卷积神经网络、相关性滤波也大量应用于目标跟踪算法中,在人机交互、智能视频监控、无人驾驶、军事侦察等领域有着广泛应用。

在智能视频监控领域,视频监控已经部署在各种场景中。对视频中的给定视频进行分析和理解,提取关键信息,完成对行人的检测、跟踪以及其它高层任务;在智能驾驶领域,智能驾驶车辆先将周边物体的位置都检测出来,然后通过目标跟踪得到周边物体的运动轨迹,从而做出相应决策;辅助驾驶系统利用车载摄像头获取前方行驶路况,结合行人跟踪技术,辅助驾驶员操作车辆行驶方向,减少事故发生可能性;在军事领域,随着科技发展水平的提高,现代战争中利用多目标跟踪对敌人和军事武器装备进行定位和跟踪,能大大提高作战效率。

随着深度学习技术的发展和深入,多目标跟踪方法取得突破性发展,基于深度学习的多目标跟踪算法不断涌现,在许多问题上取得了良好效果。现有的基于检测的目标跟踪算法如DeepSort算法,依据检测器的结果,使用卡尔曼滤波实现跟踪器对目标运动轨迹的预测和更新,通过匈牙利算法实现检测结果和跟踪器预测结果的最优匹配。该算法存在以下不足,一方面检测端采用的算法如Faster RCNN、YOLO等,这些算法网络大,所需参数多,计算量大,对硬件设备要求高,在硬件设备计算能力和存储容量受限的条件下,算法的实时性较差,无法在硬件设备受限的嵌入式硬件平台如树莓派、Jetson Nano上达到实时运行的要求,且当目标发生形变、目标尺寸较小等检测器精度较差;另一方面在跟踪端使用卡尔曼滤波算法,在跟踪过程中容易受硬件、外界环境等噪声的影响,导致算法鲁棒性较差,因此需要提出一种轻量级多目标跟踪方法,在保持精度的前提下提高运行速度以便能达到实时检测的要求,且具有更好的鲁棒性。

发明内容

本发明的所解决的技术问题是,针对现有技术的不足,提供一种多目标跟踪方法,运行速度更快,能达到实时检测的要求。

本发明所提供的技术方案为:

一种多目标跟踪方法,包括以下步骤:

步骤一:构建视频样本数据集;

步骤二:在YOLOV3网络模型中引入注意力机制模块,构建多目标检测模型;

步骤三:基于样本数据集对检测模型进行基础训练、稀疏训练、通道剪枝、层剪枝和微调,得到优化后的多目标检测模型;

步骤四:将待检测视频数据输入优化后的多目标检测模型,输出检测结果,即包括检测框的视频帧序列;

步骤五:根据检测结果进行多目标跟踪。

进一步地,所述步骤一包括以下步骤:获取视频样本,对部分视频样本中的图片采用旋转、裁剪、模糊、色彩抖动的方式进行处理,同时采用Mosaic数据增强方法,增强数据集,并在数据集中增加小目标视频样本,得到改进后的数据集,即构建好的视频样本数据集。通过K-means聚类算法,得到适合改进后的数据集的预选框。

进一步地,所述步骤三中,基础训练即利用视频样本数据集对多目标检测模型进行训练,直到模型收敛。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京理工大学,未经南京理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111479787.0/2.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top