[发明专利]多视角远程混合现实图像生成方法、装置、设备及介质

说明书

本发明公开了一种多视角远程混合现实图像生成方法、装置、设备及介质，涉及数据处理技术领域。其中，方法包括：获取在不同视角下的多个图像采集装置采集到的实时影像，并根据实时影像生成影像数据；识别影像数据中的目标物体，并在目标物体上叠加三维模型；接收终端的控制指令，根据控制指令改变三维模型的状态，并生成该状态下与终端匹配的图像采集装置对应视角的立体图像。传统手机或头戴设备的AR技术，用户需要现场使用；传统远程通讯的汽车远程控制技术，缺陷是只能呈现摄像头实时捕捉到的画面并直接呈现；传统远程操控的无人机技术，缺陷是只能被一个用户控制或观察的问题。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种多视角远程混合现实图像生成方法、装置、设备及介质。

背景技术

增强现实(Augmented Reality，AR)技术是一种将虚拟信息与真实世界巧妙融合的技术，广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段，将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后，应用到真实世界中，两种信息互为补充，从而实现对真实世界的“增强”。

传统手机或头戴设备的AR技术，用户需要现场使用；传统远程通讯的汽车远程控制技术，缺陷是只能呈现摄像头实时捕捉到的画面并直接呈现；传统远程操控的无人机技术，缺陷是只能被一个用户控制或观察；因此，需要提出更为合理的技术方案，解决现有技术存在的问题。

发明内容

为了解决传统手机或头戴设备的AR技术，用户需要现场使用；传统远程通讯的汽车远程控制技术，缺陷是只能呈现摄像头实时捕捉到的画面并直接呈现；传统远程操控的无人机技术，缺陷是只能被一个用户控制或观察的问题。

第一方面的，本发明实施例提出了一种多视角远程混合现实图像生成方法，应用于分别与载体设备和多个终端通信连接的服务端，载体设备上设有与终端对应个数的图像采集装置，方法包括：

获取在不同视角下的多个图像采集装置采集到的实时影像，并根据实时影像生成影像数据；

识别影像数据中的目标物体，并在目标物体上叠加三维模型；

接收终端的控制指令，根据控制指令改变三维模型的状态，并生成该状态下与终端匹配的图像采集装置对应视角的立体图像。

优选地，在步骤在目标物体上叠加三维模型之后，及接收终端控制指令步骤之前，还包括：根据三维模型的类型生成交互数据。

优选地，步骤接收终端的控制指令包括：接收终端根据交互数据生成的控制指令；其中，交互数据包括图文数据。

优选地，在步骤获取在不同视角下的多个图像采集装置采集到的实时影像之前，还包括：接收多个终端发送的操控信号，并根据操控信号生成操控指令，并将操控指令发送到设备载体。

优选地，图像采集装置通过万向节与载体设备连接，步骤根据操控信号生成操控指令包括：

根据操控信号筛选处于工作状态下的终端，获取处于工作状态下的终端对与之匹配的图像采集装置视角下的目标物体进行操控时，载体设备与目标物体之间的相对位置数据，在相对位置数据满足预设条件时生成操控指令。

第二方面的，本发明实施例提出了一种多视角远程混合现实图像生成装置，装置包括：

影像数据模块，用于获取在不同视角下的多个图像采集装置采集到的实时影像，并根据实时影像生成影像数据；

模型叠加模块，用于识别影像数据中的目标物体，并在目标物体上叠加三维模型；

立体图像生成模块，用于接收终端的控制指令，根据控制指令改变三维模型的状态，并生成该状态下与终端匹配的图像采集装置对应视角的立体图像。

优选地，还包括：交互模块，用于根据三维模型的类型生成交互数据。