[发明专利]视频目标追踪方法、装置、存储介质及电子设备在审
申请号: | 202110179157.5 | 申请日: | 2021-02-09 |
公开(公告)号: | CN112907628A | 公开(公告)日: | 2021-06-04 |
发明(设计)人: | 江毅;孙培泽;袁泽寰;王长虎 | 申请(专利权)人: | 北京有竹居网络技术有限公司 |
主分类号: | G06T7/246 | 分类号: | G06T7/246;G06K9/62 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 张桂杰 |
地址: | 101299 北京市平*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 目标 追踪 方法 装置 存储 介质 电子设备 | ||
1.一种视频目标追踪方法,其特征在于,所述方法包括:
获取待追踪视频;
将所述待追踪视频输入目标追踪模型,以得到所述待追踪视频对应的目标追踪结果,所述目标追踪模型用于执行如下处理:
针对所述待追踪视频的每一帧图像,确定所述图像对应的目标检测图像中待追踪目标对应的特征向量,所述目标检测图像包括所述待追踪目标;
将所述图像对应的特征图中的每一特征向量与所述目标检测图像中所述待追踪目标对应的所述特征向量进行第一相似度计算,并根据第一相似度计算结果,在所述特征图的所有特征向量中确定目标特征向量;
根据所述目标特征向量,确定所述图像中的待追踪目标。
2.根据权利要求1所述的方法,其特征在于,所述目标检测图像为包括所述待追踪目标的、所述图像的上一帧图像;或者
所述目标检测图像为包括所述待追踪目标的预设输入图像。
3.根据权利要求1所述的方法,其特征在于,所述根据第一相似度计算结果,在所述特征图的所有特征向量中确定目标特征向量,包括:
当所述目标检测图像包括N个所述待追踪目标时,在所述特征图的所有特征向量中,选取第一相似度计算结果最大的N个特征向量作为目标特征向量,所述N为正整数。
4.根据权利要求1所述的方法,其特征在于,所述目标追踪模型还用于根据预训练的位置向量参数确定所述图像中所有目标对应的特征向量,所述根据所述第一相似度计算结果,在所述特征图的所有特征向量中确定目标特征向量,包括:
当所述目标检测图像中包括N个所述待追踪目标时,在所述特征图的所有特征向量中,选取第一相似度计算结果最大的N个特征向量作为相似特征向量,所述N为正整数;
对所述图像中所有目标对应的特征向量和所述N个相似特征向量进行去重处理,以得到目标特征向量。
5.根据权利要求4所述的方法,其特征在于,所述图像为所述待追踪视频的第一帧图像,所述方法还包括:
将根据预训练的所述位置向量参数确定的所述特征向量作为所述目标特征向量。
6.根据权利要求4所述的方法,其特征在于,所述对所述图像中所有目标对应的特征向量和所述N个相似特征向量进行去重处理,以得到目标特征向量,包括:
针对所述图像中每一目标对应的特征向量,将所述特征向量与所述N个相似特征向量进行第二相似度计算;
当第二相似度计算结果大于或等于预设相似度时,在所述图像中所有目标对应的特征向量中或所述N个相似特征向量中删除所述第二相似度计算结果对应的特征向量;
将删除处理后所述图像中所有目标对应的特征向量和所述N个相似特征向量中的剩余特征向量作为目标特征向量。
7.根据权利要求4-6任一项所述的方法,其特征在于,所述位置向量参数是通过如下方式训练得到的:
根据初始位置向量参数确定样本图像中目标对应的预测特征向量,以得到所述样本图像对应的预测目标信息,其中所述样本图像预先标注有对应的样本目标信息;
根据所述预测目标信息与所述样本目标信息计算损失函数,并根据所述损失函数的计算结果,调整所述初始位置向量参数。
8.一种视频目标追踪装置,其特征在于,所述装置包括:
获取模块,用于获取待追踪视频;
追踪模块,用于将所述待追踪视频输入目标追踪模型,以得到所述待追踪视频对应的目标追踪结果,所述追踪模块包括:
第一确定子模块,用于针对所述待追踪视频的每一帧图像,确定所述图像对应的目标检测图像中待追踪目标对应的特征向量,所述目标检测图像包括所述待追踪目标;
第二确定子模块,用于将所述图像对应的特征图中的每一特征向量与所述目标检测图像中所述待追踪目标对应的所述特征向量进行第一相似度计算,并根据第一相似度计算结果,在所述特征图的所有特征向量中确定目标特征向量;
第三确定子模块,用于根据所述目标特征向量,确定所述图像中的待追踪目标。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京有竹居网络技术有限公司,未经北京有竹居网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110179157.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:可穿戴设备
- 下一篇:视频处理方法、装置、存储介质及电子设备