[发明专利]基于分层数据关联和卷积神经网络的目标跟踪方法、系统和存储介质有效

专利信息
申请号: 201810175534.6 申请日: 2018-03-02
公开(公告)号: CN108447080B 公开(公告)日: 2023-05-23
发明(设计)人: 王轩;孟东伟;漆舒汉;蒋琳;廖清;姚霖;李晔;关键;刘泽超;吴宇琳;李化乐;贾丰玮 申请(专利权)人: 哈尔滨工业大学深圳研究生院
主分类号: G06T7/277 分类号: G06T7/277;G06N3/0464
代理公司: 深圳市添源创鑫知识产权代理有限公司 44855 代理人: 姜书新
地址: 518000 广东省深圳*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 分层 数据 关联 卷积 神经网络 目标 跟踪 方法 系统 存储 介质
【权利要求书】:

1.一种基于分层数据关联和卷积神经网络的目标跟踪方法,其特征在于,包括以下步骤:

获取跟踪目标的当前视频帧的检测响应以及当前视频帧之前的所有视频帧的跟踪片段;

为每一条跟踪片段计算其置信度,其中,跟踪片段置信度是指当前已经完成部分连接的跟踪片段的可信赖程度;

根据置信度的大小,将所有的跟踪片段分为高可靠度跟踪片段和低可靠度跟踪片段两部分,并以当前视频帧的检测响应为关联对象,为高可靠度跟踪片段进行局部数据关联处理,为低可靠度跟踪片段进行全局数据关联处理,其中,全局数据关联处理结合卷积神经网络实现;

所述以当前视频帧的检测响应为关联对象,为低可靠度跟踪片段进行全局数据关联处理的步骤中包括:

对低可靠度跟踪片段进行遮挡漂移处理;其中:

对低可靠度跟踪片段进行遮挡处理包括:

将被遮挡的目标的背景框分成多个小块,每个小块赋予不同的权重,在计算表观相似度时,除了计算整体的表观相似度以外,同时计算对应小块的相似度,然后综合判定两个目标整体的相似度;

对低可靠度跟踪片段进行漂移处理包括:

将跟踪片段和相对较远距离的目标检测响应进行连接;

将目标的背景框分为六块,当出现遮挡时,第一块为背景框本身,后面的五块每一块都只包含了整个目标背景框的一部分,分别是背景框的中间上下左右五部分;

在分块计算两个目标的相似度的时候,采用一种加权环形颜色直方图的欧式距离来度量,则A和B的相似度定义如公式(1-7)所示,

式中Ak——目标A的第k个小块;

Bk——目标B的第k个小块;

d(Ak,Bk)——两个小块的加权环形颜色直方图的欧式距离;

wk——每个小块的权值;

wk具体定义如公式(1-8)所示;

式中——目标框中所有小块的相应的欧氏距离的方差,在计算表观相似度时,除了计算整体的表观相似度以外,同时计算对应小块的相似度,然后综合判定两个目标是否为同一个目标;

其中目标被其他目标或背景中的障碍物遮挡,当目标再次出现时,无法根据原有的运动模型预测出目标出现的位置,同时,目标出现的实际位置超出了在关联过程中设定的距离约束,即超出了原有的搜索范围,关联过程中的位置距离约束不再是一个常量,而是改为一个变量,用来表示,其定义如公式(1-6)所示,

相对于局部数据关联过程,在处理遮挡时允许有效数据关联的范围相对较大,的大小取决于跟踪目标的宽度和跟踪片段置信度的大小,置信度越低,的值越大,即跟踪片段和相对较远距离的目标检测响应进行连接,因为置信度越低说明跟踪发生了漂移,运动轨迹变化大,因此应扩大数据关联的范围。

2.根据权利要求1所述的基于分层数据关联和卷积神经网络的目标跟踪方法,其特征在于,所述方法还包括:

在完成数据关联处理之后,更新跟踪目标的跟踪状态;

更新每一个跟踪片段的置信度,进入下一帧的处理,一直到视频结束。

3.根据权利要求1所述的基于分层数据关联和卷积神经网络的目标跟踪方法,其特征在于,所述获取跟踪目标的当前视频帧的检测响应以及当前视频帧之前的所有视频帧的跟踪片段的步骤之前,所述方法还包括:

定义跟踪片段置信度的计算方式,所述跟踪片段置信度是指当前已经完成部分连接的跟踪片段的可信赖程度,其中,跟踪片置信度的大小考虑因素包括:可观测度、遮挡程度、段内相似度。

4.根据权利要求1所述的基于分层数据关联和卷积神经网络的目标跟踪方法,其特征在于,所述以当前视频帧的检测响应为关联对象,为高可靠度跟踪片段进行局部数据关联处理的步骤包括:

将高可靠度跟踪片段同当前视频帧的检测响应相连接,在连接过程中,计算当前所有的跟踪片段和该帧内所有的检测响应之间的相似度,所述跟踪片段和该帧内所有的检测响应之间的相似度,以跟踪片段和检测响应之间的亲和度通过矩阵方式表征,连接亲和度大于预设阈值的跟踪片段和检测响应对。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工业大学深圳研究生院,未经哈尔滨工业大学深圳研究生院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810175534.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top