[发明专利]混合现实方法和系统

说明书

本发明实施例提供一种混合现实方法和系统，该方法包括：通过红外光谱领域非可见光波段探测技术采集现实环境中目标对象的物理信息，得到该目标对象的光信号，然后将该光信号转换为电信号，将该电信号转换为数字信号，通过分布式数据传输子系统向三维数字化操作子系统发送该数字信号，由三维数字化操作子系统根据数字信号中的目标对象的物理信息生成目标对象的三维图像的相关信息，最后由三维数字化模型子系统根据目标对象的三维图像的相关信息与三维虚拟环境进行混合现实处理，从而将现实环境的物理数据叠加到三维虚拟环境中。

技术领域

本发明实施例涉及人工智能领域中的混合现实领域以及智能制造产业中的传感器集成应用领域，具体涉及一种基于红外光谱领域非可见光波段的混合现实方法和系统。

背景技术

混合现实系统的设计与开发在全球科技领域都是属于高难度的。混合现实(MixedReality，简称MR)，是一种把真实世界叠加进虚拟世界的技术。相对于增强现实(AugmentReality，简称AR)，把虚拟的东西叠加到真实世界，混合现实则是把真实的东西叠加到虚拟世界。

虽然混合现实和增强现实都是把现实和虚拟混到一起，但其实差别很大，因为把虚拟叠加到现实比较容易，就是在真实的画上显示虚拟的东西。但要把现实叠加到虚拟里，难度相对较大。因为首先需要把现实的东西虚拟化，也就是先得到摄像机捕捉的画面，但普通可见光领域的摄像机捕捉的画都是二维的图像，也就是画面是一体且扁平的，没有层次感更没有立体感，所以还得把二维的图像通过计算机形成三维(3Dimensions，简称3D)的虚拟图像，相当于3D建模，只有这样虚拟化之后，才能把它很好地融合进3D虚拟环境。

然而，目前技术都没有给出如何把现实环境的物理数据直接叠加到3D虚拟环境中。

发明内容

本发明实施例涉及新一代信息技术产业中的微纳电子与光电子领域的下一代射频芯片和硅基光电子技术、集成电路领域中的微机电系统(Microelectro MechanicalSystems，MEMS)技术、人工智能领域中的混合现实技术、物联网领域中的传感器网络技术、智能制造产业中的微机电系统传感器制备技术、工业创感器领域中的传感器集成技术，具体涉及一种基于红外光谱领域非可见光波段的混合现实方法和系统。

本发明实施例的一个目的在于提供一种混合现实方法和系统，解决如何将现实环境的物理数据直接叠加到3D虚拟环境中的问题。

第一方面，提供了一种混合现实方法，包括：

图像采集模块基于红外光谱领域非可见光波段探测，得到目标对象的光信号，并向红外非可见光传感器发送所述光信号，其中，所述光信号包含所述目标对象的物理信息；

所述红外非可见光传感器将所述光信号转换为电信号，并向光电子系统发送所述电信号；

所述光电子系统将所述电信号转换为数字信号，并向分布式数据传输子系统发送所述数字信号；

所述分布式数据传输子系统向三维数字化操作子系统发送所述数字信号；

所述三维数字化操作子系统根据所述数字信号中的所述目标对象的物理信息生成所述目标对象的三维图像的相关信息，并向三维数字化模型子系统发送所述目标对象的三维图像的相关信息；

所述三维数字化模型子系统根据所述目标对象的三维图像的相关信息与三维虚拟环境进行混合现实处理。

可选地，所述光电子系统将所述电信号转换为数字信号，并向分布式数据传输子系统发送所述数字信号，包括：

所述光电子系统将所述电信号转换为数字信号，并向计算图像采集器模块发送所述数字信号，其中，所述计算图像采集器模块用于视觉通信接口或MIPI接口与以太网之间的数据传输；

所述计算图像采集器模块向所述分布式数据传输子系统发送所述数字信号。