[发明专利]一种远程协助方法、装置和系统

权利要求书

1.一种远程协助方法，其特征在于，所述方法应用于服务器，包括：

基于终端设备的视频通话请求，与所述终端设备建立视频通话连接；

显示来自所述终端设备的视频信息，所述视频信息由所述终端设备对待协助的目标对象进行视频采集得到；

确定所述目标对象的协助信息，所述协助信息用于协助使用所述终端设备的用户操作所述目标对象；基于所述视频信息，确定所述目标对象的协助信息，包括：

对所述视频信息进行识别，确定所述目标对象的标识以及所述用户在使用所述目标对象时遇到的问题；

判断预先确定的虚拟模型中是否包括所述目标对象的标识以及所述问题，所述虚拟模型中包括多个对象的标识以及使用所述多个对象时出现的多个问题之间的映射关系；

若是，则基于所述问题，确定所述目标对象的协助信息；

基于增强现实技术，将所述协助信息叠加显示在所述视频信息中，以便所述终端设备同步显示叠加后的所述视频信息；

在确定所述目标对象的协助信息之前，所述方法还包括：

接收所述用户对协助方式的确认信息，所述确认信息中包括人工协助方式以及智能协助方式中的至少一种；

其中，确定对所述目标对象的协助信息，包括：

若所述确认信息中包括人工协助方式，则接收来自协助人员的所述协助信息，所述协助信息由所述协助人员基于所述视频信息确定得到；

若所述确认信息中包括智能协助方式，则基于所述视频信息，确定所述目标对象的协助信息；

所述方法还包括：

若所述虚拟模型中不包括所述目标对象的标识以及所述问题，则将所述视频信息发送给所述协助人员；

接收来自所述协助人员的协助信息。

2.如权利要求1所述的方法，其特征在于，

所述虚拟模型中还包括使用所述多个对象时出现的多个问题以及用于解决所述多个问题的多个协助信息之间的映射关系；

其中，基于所述问题，确定所述目标对象的协助信息，包括：

基于所述问题，在所述虚拟模型中查找与所述问题对应的协助信息；

将查找到的所述协助信息确定为所述目标对象的协助信息。

3.如权利要求1所述的方法，其特征在于，基于增强现实技术，将所述协助信息叠加显示在所述视频信息中，包括：

根据所述协助信息生成增强现实图像；

将所述增强现实图像叠加显示在所述视频信息中。

4.一种远程协助系统，其特征在于，所述系统包括终端设备和服务器，其中：

所述终端设备向所述服务器发送视频通话请求；

所述服务器基于所述视频通话请求，与所述终端设备建立视频通话连接；

所述终端设备和所述服务器显示视频信息，所述视频信息由所述终端设备对待协助的目标对象进行视频采集得到；

所述服务器确定所述目标对象的协助信息；具体为基于所述视频信息，确定所述目标对象的协助信息，包括：

对所述视频信息进行识别，确定所述目标对象的标识以及用户在使用所述目标对象时遇到的问题；

判断预先确定的虚拟模型中是否包括所述目标对象的标识以及所述问题，所述虚拟模型中包括多个对象的标识以及使用所述多个对象时出现的多个问题之间的映射关系；

若是，则基于所述问题，确定所述目标对象的协助信息；

基于增强现实技术，将所述协助信息叠加显示在所述视频信息中；

所述终端设备同步显示叠加后的所述视频信息；

所述服务器还用于：

在确定所述目标对象的协助信息之前，接收所述用户对协助方式的确认信息，所述确认信息中包括人工协助方式以及智能协助方式中的至少一种；

其中，确定对所述目标对象的协助信息，包括：

若所述确认信息中包括人工协助方式，则接收来自协助人员的所述协助信息，所述协助信息由所述协助人员基于所述视频信息确定得到；

若所述确认信息中包括智能协助方式，则基于所述视频信息，确定所述目标对象的协助信息；

所述服务器还用于：

若所述虚拟模型中不包括所述目标对象的标识以及所述问题，则将所述视频信息发送给所述协助人员；

接收来自所述协助人员的协助信息。