[发明专利]一种基于增强现实的学习互动方法、装置及存储介质

权利要求书

1.一种基于增强现实的学习互动方法，其特征在于，包括：

根据获得的用户操作指令，确定所述用户选择的学习项目；

获取与所述学习项目关联的增强现实AR图文信息；

根据所述AR图文信息，绘制所述用户进行所述学习项目的学习的AR场景，其中，所述AR场景中包括用于进行学习互动的AR对象以及由所述AR对象向所述用户展示的学习内容。

2.如权利要求1所述的方法，其特征在于，所述AR场景中包括所述学习项目的至少一种学习模式选项，在获得所述用户从所述至少一种学习模式选项中选择任一种学习模式的操作时，所述方法还包括：

根据所述用户选择的学习模式，控制所述AR对象以与所述学习模式匹配的行为特征，与所述用户进行学习互动。

3.如权利要求1或2所述的方法，其特征在于，所述获取与所述学习项目关联的增强现实AR图文信息，具体为：

获取现实世界的图像以及与所述学习项目关联的虚拟图文信息，所述AR图文信息包括所述现实世界的图像以及所述虚拟图文信息。

4.如权利要求3所述的方法，其特征在于，在所述学习项目具体为知识问答项目时，所述方法还包括：

获得所述用户输入的语音信息；

解析所述语音信息，并根据解析结果，确定与所述语音信息对应的答复语音信息；

控制所述AR对象输出所述答复语音信息。

5.如权利要求3所述的方法，其特征在于，所述学习项目具体为书写练习项目时，所述方法还包括：

确定所述用户书写的内容是否正确；

并在所述内容书写正确时，获取与所述内容相关的AR图像信息；

根据所述AR图像信息，在所述AR场景中绘制用于表征所述内容的AR图像。

6.如权利要求3所述的方法，其特征在于，在所述学习项目具体为识别现实世界中的目标物体的项目，所述获取现实世界的图像之后，包括：

从所述现实世界的图像中，确定待识别的目标物体；

识别所述目标物体，并根据识别结果获取目标物体学习资料，其中，所述目标物体学习资料通过所述AR对象向所述用户进行展示。

7.如权利要求4-6任一项所述的方法，其特征在于，所述根据所述AR图文信息，绘制所述用户进行所述学习项目的学习的AR场景，具体包括：

根据所述现实世界的图像，绘制虚拟的现实世界；

在所述虚拟的现实世界中的目标位置，根据所述虚拟图文信息，绘制AR对象，形成包括所述虚拟的现实世界以及所述AR对象的AR场景。

8.如权利要求6所述的方法，其特征在于，所述识别所述目标物体，具体为：基于神经网络R-FCN识别所述目标物体。

9.一种基于增强现实的学习互动装置，其特征在于，包括：

确定单元，用于根据获得的用户操作指令，确定所述用户选择的学习项目；

获取单元，用于获取与所述学习项目关联的增强现实AR图文信息；

绘制单元，用于根据所述AR图文信息，绘制所述用户进行所述学习项目的学习的AR场景，其中，所述AR场景中包括用于进行学习互动的AR对象以及由所述AR对象向所述用户展示的学习内容。

10.如权利要求9所述的装置，其特征在于，所述AR场景中包括所述学习项目的至少一种学习模式选项，在获得所述用户从所述至少一种学习模式选项中选择任一种学习模式的操作时，所述装置还包括：

控制单元，用于根据所述用户选择的学习模式，控制所述AR对象以与所述学习模式匹配的行为特征，与所述用户进行学习互动；

所述获取单元，用于：

获取现实世界的图像以及与所述学习项目关联的虚拟图文信息，所述AR图文信息包括所述现实世界的图像以及所述虚拟图文信息。