[发明专利]一种基于多核DSP的图像融合与目标跟踪系统

说明书

技术领域

本发明属于图像处理领域，具体涉及一种基于多核DSP的图像融合与目标跟踪系统。

背景技术

图像融合(ImageFusion)是指将多源信道所采集到的关于同一目标的图像数据经过图像处理和计算机技术等，最大限度的提取各自信道中的有利信息，最后综合成高质量的图像。简而言之，就是通过算法将两幅或者多幅图像合成一幅新图像，将多幅图像的丰富信息合并到一个新的数据集中，从而使图像的可信度更高，场景更丰富。它在许多领域都得到了广泛的应用，包括遥感图像的分析和处理、自动识别、计算机视觉、医学图像处理。在军事领域，图像融合技术在经精确制导、自主式炮弹、微型军用机器人、战场侦察车及目标跟踪等系统中发挥了重要作用。而运动目标的跟踪技术就是在视频图像的每一帧图像中确定出我们感兴趣的运动目标的位置，它在智能视频监控、交通检测等系统中有广泛的应用。

图像融合技术，常见的有基于金字塔的图像融合方法和基于小波及改进模型的图像融合方法。然而，这些方法均侧重于软件实现，且一般采用Matlab仿真软件以及VisualC++等平台，没有完整地阐述整个软硬件系统，不能有效地将算法在硬件平台上实施，无法工程化和产品化。另外，这些方法一般在达芬奇系列的硬件处理平台实现，因而无法实时跟踪目标并显示目标跟踪结果。另外，这些方法一般基于达芬奇系列的硬件处理平台实现，虽然在图像采集与输入方法较为便捷，但是无法适应快速处理及并行处理的要求。

发明内容

本发明提出一种基于多核DSP的图像融合与目标跟踪系统，能够对图像进行实时和快速地处理，并且能及时地将处理结果反馈到计算机上进行实时显示。

为了解决上述技术问题，本发明提供一种基于多核DSP的图像融合与目标跟踪系统，包括共轴光学系统平台、通信模块、图像预处理模块、图像融合处理模块、目标增强处理模块和目标跟踪模块，计算机；通信模块、图像预处理模块、图像融合处理模块、目标增强处理模块和目标跟踪模块分别在DSP的五个处理器里通过软件编程实现；

所述共轴光学系统平台由半透半反镜、可见光CCD以及个红外CCD构成；半透半反镜、可见光CCD以及红外CCD处于同一平面内；半透半反镜用于将目标场景的入射光分离成可见光和红外光；可见光CCD采集目标场景中被分离出来的可见光图像；红外CCD采集目标场景中被分离出来的红外图像；

计算机用于将可见光CCD和红外CCD采集的可见光图像和红外图像的图像数据传输给通信模块，计算机同时用于显示目标跟踪的结果；

通信模块用于接收和存储图像数据，并通过触发信号触发图像预处理模块工作；

图像预处理模块用于对可见光图像和红外图像进行双边滤波处理，去除图像中的噪声，并通过触发信号触发图像融合处理模块工作；

图像融合处理模块用于对可见光图像和红外图像进行图像融合，并通过触发信号触发目标增强处理模块工作；

目标增强处理模块用于对融合后的图像进行分区间映射彩色的伪彩色处理，增强图像中的目标，并通过触发信号触发目标增强处理模块工作；

目标跟踪模块用于在图像中标记出运动目标，获得目标跟踪结果，并通过触发信号触发通信模块将目标跟踪结果发送给计算机进行显示。

本发明与现有技术相比，其显著优点在于：(1)利用共轴光路平台产生可见光图像和红外图像，这种共轴光学平台搭建方便，体积小，光利用率高，得到的可见光图像和红外图像的图像质量较高；(2)利用DSP的多核配置，将可见光图像和红外图像的图像融合和目标跟踪处理流程分成若干子流程，通过核间通信及合作，提高了整个处理过程的效率，另外，利用该DSP特有的四倍累乘累加能力和内部的并行部件，将可见光图像和红外图像的图像融合和目标跟踪处理程序优化多数据流的操作及流水线操作，从而节省了大量时间，很大程度上提高了图像处理的速度，并且能实时返回屏幕，便于进行图像质量检测和监控等处理。

附图说明

图1是本发明基于多核DSP的图像融合与目标跟踪系统工作流程图。

图2是本发明所述的共轴光学系统平台示意图。

图3是本发明中图像融合处理模块所使用的大小为5*5时的窗口邻域。

图4是使用本发明方法进行实验时，采集到的可见光图像和红外图像。

图5是使用本发明方法进行实验时，对图4中的可见光图像和红外图像融合后的图像。

图6是使用本发明方法进行实验时，对图5进行伪彩色处理，得到伪彩色处理后的图像。