[发明专利]一种3D成像视觉引导系统

说明书

本发明公开了一种3D成像视觉引导系统，深度与RGB图像获取模块、立体成像模块、图像匹配模块、三维空间重构模块、目标物辨识模块、坐标输出模块。本发明提供的一种3D成像视觉引导系统，完成目标识别并输出追踪信息，实现室内导航、寻物以及复杂环境下的小空间搜救任务，本设计实现了匹配优化，使得引导结果更好。

技术领域

本发明涉及一种3D成像视觉引导系统，属于图像重构处理技术领域。

背景技术

目前，对于室内环境的范围测控技术主要停留在利用较为简单的距离传感器阶段。例如超声波传感器、红外线传感器等，这几种传感仪器虽然设计较为简单，但却具有精度不高、反馈信息量小等无法忽视问题。

现有视觉引导技术主要采用研究较成熟的二维平面导航，这种技术不足以满足很多实用需求，无法用于复杂地质环境室内环境搜救、近距离打击等任务。

发明内容

目的：为了克服现有技术中存在的不足，本发明提供一种3D成像视觉引导系统。

技术方案：为解决上述技术问题，本发明采用的技术方案为：

一种3D成像视觉引导系统，包括：深度与RGB图像获取模块、立体成像模块、图像匹配模块、三维空间重构模块、目标物辨识模块、坐标输出模块。

作为优选方案，所述深度与RGB图像获取模块，用于采用景深摄像头以及RGB摄像头，模式定义为640x320，每秒30帧获得图像调用OpenNI函数最终获取图像信息。

作为优选方案，所述立体成像模块，用于采用双目立体成像方法对景深摄像头以及RGB摄像头获取图像信息进行像素匹配。

作为优选方案，所述图像匹配模块，用于利用极点极线的方法，对极几何运算后得到左投影面内坐标到右投影面的转换矩阵，将景深摄像头获得像素与RGB摄像头获得像素进行重合。

作为优选方案，所述三维空间重构模块，用于将景深摄像头、RGB摄像头得的像素信息，一一对应，再对深度信息进行中值滤波．然后在OpenGL缓冲区绘制所有点的坐标，最后在每个有效点上赋予其对应的纹理参数，再结合鼠标响应就能多角度观察三维环境。

作为优选方案，所述目标物辨识模块，用于将采集的RGB图像转化为灰度图像，在图像处理过程中因采集的三通道RGB图像，应用OpenCV函数处理对象为灰度图像；依据窗口尺寸要求调整图像大小；对灰度图像进行直方图均衡；对均衡过的灰度图像采用Haar分类器进行模式识别；在图中标注识别结果，对于识别出的目标物，在灰度图像上以相应尺寸的正方形标出。

作为优选方案，所述坐标输出模块，用于以识别效果中的矩形区域为参考对象，选取景深图像对应的矩形区域中心5x5的方形采样区；发景深图像的像素信息为图像坐标，将图像坐标转换为相对摄像头的实际空间坐标，获得每个像素点的相对镜头的真实空间坐标；计算采样区所有像素点的深度均值，将与均值相差超20%的噪点剔除，计算剩余正常像素点的深度均值Z；计算剩余正常像素点其余方向的坐标均值X、Y；获得目标物在相对镜头的空间坐标系中的坐标(X，Y，Z)并向控制台输出。

有益效果：本发明提供的一种3D成像视觉引导系统，完成目标识别并输出追踪信息，实现室内导航、寻物以及复杂环境下的小空间搜救任务，本设计实现了匹配优化，使得引导结果更好。

附图说明

图1为本发明的结构示意图。

具体实施方式

下面结合附图对本发明作更进一步的说明。

如图1所示，一种3D成像视觉引导系统，包括：深度与RGB图像获取模块、立体成像模块、图像匹配模块、三维空间重构模块、目标物辨识模块、坐标输出模块。