[发明专利]一种基于多目多光谱融合的道路智能监控系统

权利要求书

1.一种基于多目多光谱融合的道路智能监控系统，其特征在于，包括：

融合相机，包括多个成像通道和图像融合处理器；

所述多个成像通道，用于获取多个光谱的道路图像，所述多个成像通道包括热红外成像传感器和微光或短波成像传感器，所述热红外成像传感器获取道路目标热红外图像，表征不同物体的温度场分布情况；所述微光或短波成像传感器获取道路短波红外图像或可见微光图像；

所述图像融合处理器，用于将获取的多个光谱的道路图像进行图像融合，所述图像融合处理器对道路目标热红外图像进行去噪增强以及畸变校正，对道路短波红外图像或可见微光图像进行ISP预处理，所述图像融合处理器对处理后的道路目标热红外图像以及道路短波红外图像或可见微光图像进行匹配融合生成多目双色融合图像；

综合处理单元，与图像融合处理器相连，用于通过执行算法对融合后的道路图像进行处理，并输出道路识别结果和标注，所述综合处理单元基于多目双色融合图像进行多目立体视觉处理，生产深度图像，并将深度图像转换为三维点云图像，所述综合处理单元基于多目双色融合图像执行分辨率提升算法生成超分辨率双色融合图像；

应用系统，与综合处理单元相连，用于根据道路识别结果和标注进行道路监控。

2.根据权利要求1所述的基于多目多光谱融合的道路智能监控系统，其特征在于，所述综合处理单元综合超分辨率双色融合图像和三维点云图像执行多目立体视觉算法实现高可靠性道路目标智能识别、分类和测量；执行超分辨双色融合图像语义分割算法，保留道路和道路相关目标信息，剔除无关要素，将目标智能识别和测量结果标注于超分辨双色融合图像中进行输出。

3.根据权利要求1所述的基于多目多光谱融合的道路智能监控系统，其特征在于，还包括显示屏，用于显示道路识别结果和标注。

4.根据权利要求1所述的基于多目多光谱融合的道路智能监控系统，其特征在于，还包括支撑结构，用于支撑融合相机，维持基线稳定。