[发明专利]一种模拟飞行器人机交互系统

权利要求书

1.一种模拟飞行器人机交互系统，其特征在于，包括：摄像机、图像处理模块、建模模块、合成模块、支撑结构、穿戴显示模块和教员显示器；其中，所述支撑结构安装在所述模拟飞行器的座椅上，所述穿戴显示模块安装在所述支撑结构上；

所述摄像机用于采集手部的视频图像，并发送至所述图像处理模块；

所述图像处理模块对所述手部的图像进行分割，并经过视点变换后发送给所述合成模块；

所述建模模块用于采用三维建模软件建立座舱和外部场景模型，并利用图形引擎实时渲染出座舱内外虚拟图像，并发送给所述合成模块；

所述合成模块用于将经过视点变换后的图像以及所述建模模块发送的座舱内外虚拟图像进行融合，并发送给所述穿戴显示模块；

所述穿戴显示模块用于向体验者提供视觉反馈；

所述教员显示器与所述合成模块相连，用于供教员对模拟过程进行监督。

2.根据权利要求1所述的一种模拟飞行器人机交互系统，其特征在于，所述穿戴显示模块包括：左显示屏、中显示屏和右显示屏；且所述左显示屏、所述中显示屏和所述右显示屏依次连接。

3.根据权利要求2所述的一种模拟飞行器人机交互系统，其特征在于，所述左显示屏与所述中显示屏之间的夹角，以及所述中显示屏与所述右显示屏之间的夹角均为120°。

4.根据权利要求1所述的一种模拟飞行器人机交互系统，其特征在于，所述图像处理模块包括：

颜色空间转换单元，用于对手部的图像进行颜色空间转换；

光照补偿单元，用于对经过颜色空间转换的图像进行光照补偿；

模型检测单元，用于基于肤色模型对经过光照补偿的图像进行肤色检测；

滤波单元，用于对经过肤色检测的图像进行形态学滤波；

轮廓处理单元，用于对经过形态学滤波的图像进行轮廓搜索和平滑，得到手部的分割结果。

5.根据权利要求4所述的一种模拟飞行器人机交互系统，其特征在于，还包括：参数更新单元，用于根据分割结果提取模型参数，并根据所述模型参数对所述肤色模型进行更新。

6.根据权利要求4所述的一种模拟飞行器人机交互系统，其特征在于，所述教员显示器与所述合成模块之间通过视频线相连。

7.根据权利要求1所述的一种模拟飞行器人机交互系统，其特征在于，还包括：传感器、信号调理器和外接计算机；

所述传感器与所述信号调理器单向连接；

所述信号调理器与所述外接计算机双向连接。

8.根据权利要求7所述的一种模拟飞行器人机交互系统，其特征在于，所述信号调理器包括：放大电路、滤波电路、处理器和通信电路；

所述放大电路依次与所述滤波电路、所述处理器和所述通信电路相连；其中，所述处理器与所述通信电路双向连接；

所述放大电路的另一端与所述传感器相连，所述通信电路与所述外接计算机双向连接。