[发明专利]虚拟与现实互动教学方法及系统、服务器、存储介质

说明书

本发明公开一种虚拟与现实互动教学方法及系统、服务器、存储介质，其中方法包括如下步骤：通过全景摄像设备将全景影像直播到虚拟教学场景中，形成距离视觉点较远的不断变化的包裹环境(既天空盒)，与场景中所有场景形象共同构成完整虚拟教学场景，其中场景形象包括其他参与互动教学人员的真实影像或虚拟形象；然后输出完整虚拟教学场景至用户的互动教学设备中，使这些用户基于观看的完整虚拟教学场景做出相应的互动行为。采用本发明，可以实时变换的天空盒的形式将异地的人物或场景直接传递给参与教学的所有人员，形成高效率的互动教学，有利于虚拟现实或增强现实或混合现实教育技术的广泛推广。

技术领域

本发明涉及智慧教育技术领域，尤其涉及一种虚拟与现实互动教学方法及系统、服务器、存储介质。

背景技术

随着科技的发展，多媒体教学已经普遍应用于各领域的教学场景中，各种课件或者视频均可以通过互联网远端学习或者实时交互，但仅通过屏幕投影或者显示器现实的多媒体教学方式，不能体现三维展示效果，具有较大的局限性，影响教学互动的积极性，而当前的虚拟现实教学系统通过将真实视频或图像与虚拟场景进行算法融合，呈现给师生一种身临其境的真实教学感受，但现有技术需要通过各种算法将真实视频或图像与虚拟场景进行场景融合，算法复杂度较大，对设备性能要求较高，不利于虚拟现实或增强现实或混合现实教育技术的广泛推广。

发明内容

本发明实施例提供一种虚拟与现实互动教学方法及系统、服务器、存储介质，可以实时变换的天空盒的形式将异地的人物或场景直接传递给参与教学的所有人员，形成高效率的互动教学，有利于虚拟现实或增强现实或混合现实教育技术的广泛推广。

本发明实施例第一方面提供了一种虚拟与现实互动教学方法，可包括：

获取全景摄像设备拍摄的全景影像；

将全景影像直播至虚拟教学场景形成距离视觉点较远的不断变化的天空盒，与虚拟教学场景中所有场景形象共同构成完整虚拟教学场景，场景形象包括其他参与互动教学人员的真实影像或虚拟形象；

输出展示完整虚拟教学场景，使佩戴互动教学设备的用户基于观看的完整虚拟教学场景做出相应的互动行为，互动教学设备包括虚拟现实设备或增强现实设备或混合现实设备；

将互动行为反映在完整虚拟教学场景中，供发出互动行为的人员或其他佩戴互动教学设备的人员观看。

进一步的，天空盒随直播的进行展示实时变换的全景影像。

进一步的，上述方法还包括：

基于摄像系统获取教学直播场景中的教学影像数据；

提取教学影像数据中目标对象的真实影像；

将真实影像添加至虚拟教学场景中，与虚拟教学场景中所有场景形象共同构成完整虚拟教学场景。

进一步的，上述提取教学影像数据中目标对象的真实影像，包括：

采用绿幕抠像或其他抠像技术将教学影像数据中目标对象的真实影像从场景影像中提取出来。

进一步的，上述方法还包括：

将目标对象的真实影像虚拟化为虚拟形象后添加至虚拟教学场景中。

本发明实施例第二方面提供了一种虚拟与现实互动教学系统，可包括：

服务器，用于获取全景摄像设备拍摄的全景影像；

服务器，还用于将全景影像直播至虚拟教学场景形成距离视觉点较远的不断变化的天空盒，与虚拟教学场景中所有场景形象共同构成完整虚拟教学场景，场景形象包括其他参与互动教学人员的真实影像或虚拟形象；