[发明专利]一种合成视景图像处理系统

权利要求书

1.一种合成视景图像处理系统，其特征在于包括视频处理模块和数据融合模块，其中视频处理模块采用FPGA+DSP作为视频处理核心，采用FPGA对多路外视频分别进行图像预处理，预处理后的图像送入DSP完成多路视频拼接工作；数据融合模块采用CPU+GPU作为处理核心，CPU用于系统调度和管理，GPU用于视频融合和图形绘制；来自高速相机的多路外视频在视频处理模块中进行拼接处理后送入数据融合模块，数据融合模块综合车辆/飞机的传感器信息、面板指令、位置信息、三维地图以及拼接视频信息，进行融合处理，最终将显示内容输出到显示设备上。

2.如权利要求1所述的一种合成视景图像处理系统，其特征在于视频处理模块中的DSP用于进行多路视频拼接，视频拼接算法采用SURF+优化RANSAC算法；所述SURF+优化RANSAC算法包括四个步骤：

第一步、获取视频文件并且设置一些关键参数；

第二步、识别是否为关键帧，对关键帧在重叠区域的ROI中用SURF算法生成特征描述算子，从而生成匹配点对；

第三步、用优化的RANSAC算法筛选匹配点对并生成最终的变换矩阵H；

第四步、图像帧的融合形成拼接图像。

3.如权利要求2所述的一种合成视景图像处理系统，其特征在于：所述第三步中，优化的RANSAC算法在筛选匹配点过程中，采用SURF算子粗匹配的点对中依顺序选取一匹配点对，把匹配对中特征点主方向和长度都匹配的点保留下来，而不符合的匹配点对都舍弃，直到检测完所有特征点匹配对。

4.如权利要求1所述的一种合成视景图像处理系统，其特征在于：所述数据融合模块是采用CPU+GPU的硬件构架及多模块软件来进行数据融合处理，其中，CPU负责系统管理调度，GPU负责数据融合和图像绘制，多模块软件运行于CPU之上，包括模型载入模块、模型数据管理模块、配置载入模块、地形管理模块、外视频管理模块、控制指令管理模块以及绘制模块。