[发明专利]一种基于注意力多模态特征融合的无监督RGB-T目标跟踪方法在审
| 申请号： | 202210138232.8 | 申请日： | 2022-02-15 |
| 公开（公告）号： | CN114494354A | 公开（公告）日： | 2022-05-13 |
| 发明（设计）人： | 姚睿;李生蘭;周勇;祝汉城;刘兵;赵佳琦;邵志文;杜文亮 | 申请（专利权）人： | 中国矿业大学 |
| 主分类号： | G06T7/246 | 分类号： | G06T7/246;G06N3/08;G06N3/04 |
| 代理公司： | 南京冠誉至恒知识产权代理有限公司 32426 | 代理人： | 黄成萍 |
| 地址： | 221116 江苏省徐州*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于注意力多模态特征融合的无监督RGB‑T目标跟踪方法，先采用分层卷积神经网络来提取RGB图像和热红外图像的特征；再使用特征融合模块将来自不同水平及不同模态的特征进行同步融合；再对融合得到的特征进行两次前向跟踪得到响应图；接着，将融合特征逆序，原先的模板图作为搜索图，搜索图作为模板图，生成的响应图作为伪标签进行反向跟踪得到最终的响应图；然后，最小化反向跟踪得到的响应图与原始标签之间的一致性损失进行无监督训练；最后，将测试视频帧输入训练好的网络进行前向跟踪得到响应图即为预测的目标位置。本发明方法可以充分利用多层次、多模态信息并能发挥无监督学习的优势。 | ||
| 搜索关键词： | 一种 基于 注意力 多模态 特征 融合 监督 rgb 目标 跟踪 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中国矿业大学，未经中国矿业大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210138232.8/，转载请声明来源钻瓜专利网。
