[发明专利]一种多目标跟踪方法、装置、计算机及存储介质有效

专利信息
申请号: 202110922602.2 申请日: 2021-08-12
公开(公告)号: CN113409361B 公开(公告)日: 2023-04-18
发明(设计)人: 林涛;张炳振;刘宇鸣;邓普阳;张枭勇;陈振武;王宇;周勇 申请(专利权)人: 深圳市城市交通规划设计研究中心股份有限公司
主分类号: G06T7/246 分类号: G06T7/246;G06V10/764;G06V10/44;G06V10/82;G06N3/0464;G06N3/08
代理公司: 哈尔滨市伟晨专利代理事务所(普通合伙) 23209 代理人: 李晓敏
地址: 518131 广东省深圳市龙华区民治*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 多目标 跟踪 方法 装置 计算机 存储 介质
【说明书】:

发明提出一种多目标跟踪方法、装置、计算机及存储介质,属于人工智能技术领域。具体包括,首先将视频输入至融合检测关联模块中,进行降采样处理获得特征图,将特征图输入至差异计算网络中,获得差异特征;其次,用深度学习中多任务学习方法得到目标类别、目标位置信息和同一目标在不同视频帧中相同的trackID;根据连续帧中目标运动轨迹信息,用轨迹预测模块预测当前帧目标可能出现的位置,为融合检测关联模块提供参考。最后,输出多目标跟踪信息。解决了解决现有技术中存在的目标跟踪效率低、目标容易丢失、目标ID易变化的技术问题,提高了多目标跟踪的效率以及避免目标跟踪的丢失。

技术领域

本申请涉及一种目标跟踪方法,尤其涉及一种多目标跟踪方法、装置、计算机及存储介质,属于人工智能技术领域。

背景技术

多目标跟踪是在视频中同时跟踪多个目标,应用场景是安防和自动驾驶等,这些场景中人、车数量不确定,每个目标的特征也不确定,对这些目标进行跟踪是其他应用(如定位目标,计算目标密集程度等)的基础。和单目标跟踪不同,多目标跟踪对每个目标有唯一ID标识,在跟踪过程中要保证目标不会丢失。同时,新目标的出现和旧目标消失也是多目标跟踪要解决的问题。

目前针对多目标跟踪的研究有很多,主流的跟踪策略是DBT(基于检测的跟踪),检测模块和数据关联模块是独立的两部分,视频序列首先经过检测算法,得到目标的位置信息,在执行数据关联算法得到最终的轨迹结果。

多目标跟踪中有代表性的算法是DeepSORT 算法,该方法属于MOT(多目标跟踪)中的数据关联算法,可以结合任意检测器实现多目标跟踪。该算法结合了卡尔曼滤波算法和匈牙利算法。利用卡尔曼滤波算法预测检测框在下一帧的状态,将该状态与下一帧的检测结果进行匹配。匹配过程使用匈牙利算法,用卡尔曼滤波得到运动特征结合CNN(卷积神经网络)提取的外观特征融合到一起计算代价矩阵。

MOT的应用主要是安防和自动驾驶等场景,这些场景对算法实时性要求很高。在硬件水平固定的情况下,应该尽可能提高MOT的检测效率和检测准确率。现有技术中MOT在实际应用中会存在效率低的问题。现有的实时MOT通常只关注数据关联步骤,本质上只完成了MOT的一部分,无法真正解决效率问题。

此外,在真实场景中不同目标经常出现遮挡,这会导致MOT出现目标丢失、目标ID变化等问题。

发明内容

在下文中给出了关于本发明的简要概述,以便提供关于本发明的某些方面的基本理解。应当理解,这个概述并不是关于本发明的穷举性概述。它并不是意图确定本发明的关键或重要部分,也不是意图限定本发明的范围。其目的仅仅是以简化的形式给出某些概念,以此作为稍后论述的更详细描述的前序。

鉴于此,为解决现有技术中存在的目标跟踪效率低、目标容易丢失、目标ID易变化的技术问题,本发明提供了一种多目标跟踪方法、装置、计算机及存储介质,本发明通过将检测模块和数据关联模块融合到同一个神经网络中,通过共享相同的底层特征,减小计算量以缩短运行时间,检测模块和数据关联模块融合后组成新的模块,该模块称为融合检测关联模块。

融合检测关联模块输出不同目标的位置和类别信息。轨迹预测模块以这些信息为输入,学习不同类别的目标轨迹信息,提高了目标跟踪的效率以及避免目标跟踪的丢失。

一种多目标跟踪方法,包括以下步骤:

S110将视频输入至融合检测关联模块中,进行降采样处理获得特征图,将特征图输入至差异计算网络中,获得差异特征;

S120计算损失函数;

S130获得目标类别、目标位置信息和目标间的数据关联关系;并将目标位置信息输入轨迹预测模块中,利用卷积运算学习目标移动,输出预测位置信息,形成不同类别目标运动规律信息并传输至数据库和融合检测关联模块;

S140输出多目标跟踪。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市城市交通规划设计研究中心股份有限公司,未经深圳市城市交通规划设计研究中心股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110922602.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top