[发明专利]一种MR混合现实智能感知交互系统

权利要求书

1.一种MR混合现实智能感知交互系统，其特征在于，所述系统包括：

感知层组件，所述感知层组件包括物理感知层组件和虚拟感知层组件；所述感知层组件用于通过多个物理传感器和虚拟传感器实时捕捉和采集感知交互实体的特征数据，并通过虚拟现实VR和增强现实AR技术进行虚拟场景的预构建；

中控管理层组件，所述中控管理层组件包括3D游戏引擎模块和MR智能感知交互模块；所述3D游戏引擎模块用于将实时采集到的所述感知交互实体的特征数据和预构建的所述虚拟场景输入至3D游戏引擎内从而形成了一个虚实结合的三维空间关系；所述MR智能感知交互模块用于将所述三维空间关系与真实物理环境结合生成混合现实三维交互关系，借助物联网组件并结合数据资源管理包进行实时交互的可视化展示和容错纠错处理；

应用层组件，用于根据实际应用需求提供不同的应用；

所述虚拟感知层组件包括由多个虚拟传感器组成的虚拟传感器集群、虚拟现实VR模块、智能交互中控模块、仿真交互资源模块以及电子课件管理模块；

所述虚拟现实VR模块用于通过虚拟现实VR技术进行虚拟场景的预构建；所述智能交互中控模块用于对虚拟现实VR模块的中控调节以及对所述虚拟场景中相关环境因素的调节；所述仿真交互资源模块用于提供所述虚拟场景中的包括人或物的仿真交互对象；所述电子课件管理模块用于对所述虚拟场景中示教用相关电子课件的管理；

所述系统还包括数据处理层组件，所述数据处理层组件包括数据处理器模块和数据融合与分析管理模块；

所述数据处理器模块用于对所述物理感知层组件获取的数据进行处理，通过将各类应用传感器所采集的数据信息，通过AI、云计算技术进行深度学习、精细遴选、计算分析处理得到系统环境所需的分类数据；所述数据融合与分析管理模块用于将所述物理感知层组件和所述虚拟感知层组件获取的数据进行融合与分析；

所述MR智能感知交互模块包括MR智能感知交互平台、数据库模块、数据分析模块以及整合资源管理器模块；

所述MR智能感知交互平台用于提供与所述混合现实三维交互关系进行实时交互的平台；所述数据库模块用于存储基础数据；所述数据分析模块用于对所述分类数据进行精细化拆解并再分类萃取，并利用数据分析自动筛选归类技术与所述基础数据融合生成数据资源管理包；所述整合资源管理器模块用于根据实际应用需求整合底层资源库和不同的功能模块以实现应用。

2.根据权利要求1所述的一种MR混合现实智能感知交互系统，其特征在于，所述物理感知层组件包括由多个物理传感器组成的物理传感器集群、信号处理器以及增强现实AR模块，所述信号处理器用于对所述物理传感器输出信号进行处理，所述增强现实AR模块用于通过增强现实AR技术进行虚拟场景的预构建。

3.根据权利要求1所述的一种MR混合现实智能感知交互系统，其特征在于，所述功能模块包括图像识别处理模块、实时交互模块、深度学习模块、数据捕捉模块和实时渲染模块；

所述图像识别处理模块用于通过图像识别与处理技术，实现实时交互的可视化输出；所述实时交互模块用于借助交互工具与所述混合现实三维交互关系进行实时交互；所述深度学习模块用于采用深度学习算法进行系统的自适应学习；所述数据捕捉模块用于对动作或表情节点数据进行采集和处理以完成动作或表情捕捉；所述实时渲染模块用于对所述混合现实三维交互关系进行实时渲染。

4.根据权利要求3所述的一种MR混合现实智能感知交互系统，其特征在于，所述MR智能感知交互模块还包括机理反馈调节模块，用于根据可视化展示结果以及深度学习结果对系统进行反馈调节。

5.根据权利要求1所述的一种MR混合现实智能感知交互系统，其特征在于，所述底层资源库包括三维背景素材库和仿真交互物体素材库。

6.根据权利要求1所述的一种MR混合现实智能感知交互系统，其特征在于，所述应用的内容包括多人协同异地实时模拟训练、深刻体验记忆、行为强化训练、沉浸式模拟交互体验、交互机理的深度探究、隐性数据捕捉及处理以及深度行为学习体系建设。