[发明专利]结合3D与虚拟现实技术实现多人交互方法、系统及介质

说明书

本发明公开一种结合3D显示技术与虚拟现实技术实现多人交互方法、系统及介质，将呈现在3D显示屏的场景与呈现在虚拟现实头显中的3D场景运行在同一虚拟环境中。由一位置追踪服务器确定各体验者在现实场地中对应的位置和运动轨迹，由虚拟环境同步服务器同步3D主机与虚拟现实主机虚拟场景数据变化。3D主机和虚拟现实主机分别根据各体验者的定位数据确定各体验者在同一虚拟场景中对应的位置及运动轨迹，以确定至各体验者对应视角下的显示内容并进行渲染，3D显示屏根据3D主机渲染的内容进行显示，虚拟现实显示设备根据虚拟现实主机渲染的内容进行显示，以使得各个3D体验者和VR体验者以各自视角观看同一虚拟场景，实现多人、多平台与虚拟世界的实时交互。

技术领域

本发明涉及虚拟现实技术领域，尤其涉及一种结合3D与虚拟现实技术实现多人交互方法、系统及介质。

背景技术

传统的展示模式，一般需要借助宣传图册、平面效果图、沙盘或者视频播放等工具做介绍和解释，展示模式是二维的，缺乏3D立体感，虽然当前技术可以在移动终端等设备中进行VR效果展示，呈现立体视觉感，但这种方式受到空间的限制，无法全面的呈现在体验者面前，而且无法进行多人观看交互，因此，有必要提供一种结合3D显示屏与大空间VR多人交互的融合技术，使体验者既可进行VR沉浸式体验，又可让更多观众观看3D显示屏，实现多人、多平台与虚拟世界的实时交互效果。

发明内容

本发明的主要目的在于提供一种结合3D显示技术与虚拟现实技术实现多人交互方法、系统及存储介质，旨在解决无法进行多人观看交互技术问题，支持多样化显示，可跨平台、多人共享沉浸式画面，满足多人不同平台观看体验。

根据第一方面，一种实施例中提供一种结合3D显示技术与虚拟现实技术实现多人交互方法，应用于客户端，所述客户端包括3D眼镜设备、3D显示屏、3D主机、虚拟现实显示设备、虚拟现实主机及虚拟环境同步服务器，所述3D主机与虚拟现实主机连接在同一所述虚拟环境同步服务器中，所述虚拟环境同步服务器运行所述3D主机与所述虚拟现实主机的同一虚拟场景并进行所述3D主机与所述虚拟现实主机系统的信息同步；所述方法包括：

所述3D主机、所述虚拟现实主机与所述虚拟现实同步服务器同时接收位置追踪服务器端发送的至少一个佩戴3D眼镜设备的3D体验者和至少一个佩戴虚拟现实显示设备的VR体验者在真实三维空间内的定位数据；其中，所述定位数据根据各个体验者佩戴设备上的刚体标记点获取，用于确定各个佩戴设备在真实三维空间内的位置及朝向；

所述虚拟环境同步服务器根据各个体验者的所述定位数据同步各个体验者在同一虚拟场景中对应的位置及运动轨迹；

所述3D主机和所述虚拟现实主机根据各个体验者在所述同一虚拟场景中对应的位置及运动轨迹确定各个体验者对应视角下的显示内容并进行渲染；

所述3D显示屏根据所述3D主机渲染的内容进行显示，所述虚拟现实显示设备根据所述虚拟现实主机渲染的内容进行显示，以使得各个3D体验者和VR体验者以各自视角观看同一虚拟场景。

在其中一种可能实现方式中，所述客户端还包括一用于交互控制的手柄；

所述3D主机根据由手柄发出的控制命令进行虚拟场景的切换，其中，所述虚拟场景的切换包括虚拟场景的更换及虚拟场景中虚拟角色的前、后、左、右、上和/或下运动以及3D体验者左、右、上、下的视角变换。

在其中一种可能实现方式中，所述手柄上设有刚体标记点；

所述虚拟环境同步服务器同时接收手柄和3D体验者在真实三维空间内的定位信息；其中，所述定位信息根据所述手柄和3D眼镜设备上的刚体标记点获取；

所述3D主机结合所述定位信息与虚拟场景中虚拟角色的前、后、左、右、上和/或下运动的位置数据，计算获取到手柄与3D显示屏之间合理的位置关系，并进行渲染，以使得在3D显示屏上相应的位置上显示出相应的手柄模型；