[发明专利]基于孪生RPN的异源匹配方法

摘要

本发明公开了一种基于孪生RPN的异源匹配方法，实现在可见光图中选择感兴趣的区域后，能够在红外光图中自动将该区域选中。通过将孪生神经网络与候选区域网络串联，使用孪生神经网络提取目标特征，将目标特征输入到RPN网络中，区分前景和背景并选定目标位置。把第一帧可见光图的锚点框包含内容视为检测的样例，在红外光图里面检测与它相似的目标。本发明通过该网络可利用“图片对”进行端到端的离线训练。将在线跟踪任务转换为一次检测任务，而不是使用低效费时的多尺度测试，在保证准确率的同时，达到了较高的速度，实现了红外光图和可见光图的异源匹配。