[发明专利]一种导游方法、装置、电子设备及存储介质

说明书

本申请公开了一种导游方法、装置、电子设备及存储介质，涉及增强现实和图像等人工智能技术领域。具体方案为：接收应用端设备发送的用户在目标景点的当前位置区域内采集到的视频流；基于采集到的视频流和预先保存的目标景点的三维点云数据，确定出当前位置区域对应的基于增强现实的内容资源包；其中，基于增强现实的内容资源包中至少包括应用端设备的6自由度姿态数据；将当前位置区域对应的基于增强现实的内容资源包发送至应用端设备，使得应用端设备将前位置区域对应的基于增强现实的内容资源包提供给用户。本申请实施例可以从多个方位和多个角度触发服务，保证游客的视线和讲解的内容实时匹配，从而可以提升用户的游览体验。

技术领域

本申请涉及人工智能技术领域，进一步涉及增强现实和图像技术，尤其是一种导游方法、装置、电子设备及存储介质。

背景技术

随着旅游业的高速发展，越来越多的人选择通过自助游的方式出行，以人文、建筑、历史等为主题的景点特别依赖导游的伴游，以便增长旅行的知识和乐趣。另外，有的景区也提供付费的语音讲解器给游客，游客可以按指定的游览路线点击按钮来倾听针对特定景点的讲解，或者基于蓝牙和行动热点Wi-Fi进行语音讲解。

语音导游是一种基于全球定位系统(Global Positioning System，简称GPS)/Wi-Fi/蓝牙定位的语音讲解产品，通过反复播放提前录制好的按景点切分好的语音素材来实现服务，仅可提供语音讲解，无法像导游员一样，在真实场景前，对指定的位置和细节进行讲解，使用上有一定局限，而且使用过程中容易产生当前播放的语音内容与目光所及看到的内容不匹配的问题；此外，基于识别图检索触发的服务，类似于语音讲解，触发内容也可能是图文版的景点介绍，无法结合实景边看边听。另外，基于2D图像识别和跟踪类型的AR信息增强适用场景有局限性，适用于包装、印刷等场景，不适用于景区、建筑物等大型场景，无法从多个角度识别触发，无法通过方位感知智能触发提升连续体验感受；而且在大型景点和复杂的景点中，还会有较多的小摆设和小物件摆在游客面前，此时游客很容易关注于这些小摆设和小物件，而无暇顾及语音讲解的内容，游客的视线和语音讲解的内容不能完美的实时匹配。

发明内容

本申请提供了一种导游方法、装置、电子设备及存储介质，可以从多个方位和多个角度触发服务，保证游客的视线和讲解的内容实时匹配，从而可以提升用户的游览体验。

第一方面，本申请提供了一种导游方法，所述方法包括：

接收应用端设备发送的用户在目标景点的当前位置区域内采集到的视频流；

基于所述采集到的视频流和预先保存的所述目标景点的三维点云数据，确定出所述当前位置区域对应的基于增强现实的内容资源包；其中，所述基于增强现实的内容资源包中至少包括所述应用端设备的6自由度姿态数据；

将所述当前位置区域对应的基于增强现实的内容资源包发送至所述应用端设备，使得所述应用端设备将所述前位置区域对应的基于增强现实的内容资源包提供给所述用户。

第二方面，本申请提供了一种导游方法，所述方法包括：

获取用户在目标景点的当前位置区域内采集到的视频流；

将所述采集到的视频流发送至服务端设备，使得所述服务端设备基于所述采集到的视频流和预先保存的所述目标景点的三维点云数据确定出所述当前位置区域对应的基于增强现实的内容资源包；其中，所述基于增强现实的内容资源包中至少包括所述应用端设备的6自由度姿态数据；

接收所述应用端设备发送的所述当前位置区域对应的基于增强现实的内容资源包，将所述当前位置区域对应的基于增强现实的内容资源包提供给所述用户。

第三方面，本申请提供了一种导游装置，所述装置包括：第一接收模块、确定模块和第一发送模块；其中，

所述第一接收模块，用于接收应用端设备发送的用户在目标景点的当前位置区域内采集到的视频流；