[发明专利]基于儿童专用穿戴智能设备的交互方法及系统

说明书

本发明提供的基于儿童专用穿戴智能设备的交互方法，其包含：启动儿童专用穿戴智能设备上的视觉识别模块，接收用户输入的多模态输入数据，依据多模态输入数据选择场景类型；在场景类型对应交互模式下，调用视觉识别模块中的视觉识别能力，采集当前视野下的图像信息；将图像信息上传至云端进行解析，得到与图像信息对应的多模态回应数据；接收并输出云端传送的所述多模态回应数据。本发明能够接收用户输入的多模态输入数据确定场景类型及交互模式，在确定的交互模式下采集图像信息传送至云端进行解析，生成多模态回应数据。本发明能够完成用户搜题、翻译、批改、百科等交互需求，给儿童用户提供更加便捷的交互服务，提升了用户的使用体验。

技术领域

本发明涉及人工智能领域，具体地说，涉及一种基于儿童专用穿戴智能设备的交互方法及系统。

背景技术

随着科学技术的不断发展，信息技术、计算机技术以及人工智能技术的引入，对于智能设备的研究已经逐步走出工业领域，逐渐扩展到了医疗、保健、家庭、娱乐以及服务行业等领域。而人们对于智能设备的要求也从简单重复的机械动作提升为具有拟人问答、自主性及与其他智能设备进行交互的设备，人机交互也就成为决定智能设备发展的重要因素。因此，提升智能设备的交互能力，改善智能设备的类人性和智能性，是现在亟需解决的重要问题。

因此，本发明提供了一种基于儿童专用穿戴智能设备的交互方法及系统。

发明内容

为解决上述问题，本发明提供了一种基于儿童专用穿戴智能设备的交互方法，所述方法包含以下步骤：

启动儿童专用穿戴智能设备上的视觉识别模块，接收用户输入的多模态输入数据，依据所述多模态输入数据选择场景类型；

在场景类型对应交互模式下，调用所述视觉识别模块中的视觉识别能力，采集当前视野下的图像信息；

将所述图像信息上传至云端进行解析，得到与所述图像信息对应的多模态回应数据；

接收并输出所述云端传送的所述多模态回应数据。

根据本发明的一个实施例，所述场景类型包含搜题场景、翻译场景、批改场景、百科场景、绘本场景、字迹场景以及造句场景。

根据本发明的一个实施例，依据所述多模态输入数据选择场景类型，具体包含以下步骤：

对所述多模态输入数据进行分析，提取所述多模态输入数据中包含的文字信息及用户的多模态指示信息；

对所述文字信息以及所述多模态指示信息进行识别，获取所述文字信息对应的场景特征及用户需求；

获取与所述场景特征匹配的场景类型。

根据本发明的一个实施例，得到与所述图像信息对应的多模态回应数据的步骤中，还包含以下步骤：

对所述图像信息进行光学字符识别以及图像识别以生成匹配结果数据，对所述匹配结果数据进行语音转化处理，将所述匹配结果数据中的文字数据转化成语音数据；

依据所述匹配结果数据，确定与所述语音数据匹配的图片数据以及视频数据；

得到包含所述文字数据、所述语音数据、所述图片数据以及所述视频数据的所述多模态回应数据。

根据本发明的一个实施例，场景类型对应交互模式通过如下方式实现：

当接收到用户输入的确认或打断指令时，接收用户输入的多模态交互数据；

对所述多模态交互数据进行解析，获取用户的交互意图，依据所述交互意图与用户展开交互。

根据本发明的一个实施例，所述方法还包括：

获取当前用户的身份特征信息，对当前用户的用户属性进行判断，确定当前用户的类别，其中，用户的类别包含：儿童用户。