[发明专利]一种用于智能机器人的人机交互方法及装置

说明书

技术领域

本发明涉及机器人技术领域，具体地说，涉及一种用于智能机器人的人机交互方法及装置。

背景技术

随着科学技术的不断发展，信息技术、计算机技术以及人工智能技术的引入，机器人的研究已经逐步走出工业领域，逐渐扩展到了医疗、保健、家庭、娱乐以及服务行业等领域。而人们对于机器人的要求也从简单重复的机械动作提升为具有拟人问答、自主性及与其他机器人进行交互的智能机器人，人机交互也就成为决定智能机器人发展的重要因素。因此如何提高智能机器人的人机交互水平成为人们越来越关注的问题。

发明内容

为解决上述问题，本发明提供了一种用于智能机器人的人机交互方法，其包括：

交互信息获取步骤，获取用户输入的多模态交互信息；

字符识别步骤，对所述多模态交互信息进行解析，根据解析结果进行视觉采集，并对视觉采集到的图像进行光学字符识别，得到光学字符识别结果；

反馈信息生成步骤，根据所述光学字符识别结果生成多模态反馈信息并输出。

根据本发明的一个实施例，在所述反馈信息生成步骤中，根据所述解析结果生成用户意图信息，并根据所述光学字符识别结果和用户意图信息，生成所述多模态反馈信息。

根据本发明的一个实施例，在所述反馈信息生成步骤中，根据所述光学字符识别结果生成相应的反馈信息，并判断该反馈信息是否正常，如果该反馈信息正常，则利用利用TTS引擎朗读该反馈信息。

根据本发明的一个实施例，如果所述光学字符识别结果正常，则将所述光学字符识别结果发送云端服务器以由所述云端服务器根据所述光学字符识别结果进行商品检索，并根据所述云端服务器发送来的商品检索结果生成所述多模态反馈信息。

根据本发明的一个实施例，所述方法还包括：

在对所述多模态交互信息进行解析时，获取多模态交互信息中的识别意图，并开启光学字符识别应用，所述光学字符识别应用运行在机器人操作系统中，所述机器人操作系统装载于所述智能机器人上。

本发明还提供了一种用于智能机器人的人机交互装置，其包括：

交互信息获取模块，其用于获取用户输入的多模态交互信息；

字符识别模块，其用于对所述多模态交互信息进行解析，根据解析结果进行视觉采集，并对视觉采集到的图像进行光学字符识别，得到光学字符识别结果；

反馈信息生成模块，其用于根据所述光学字符识别结果生成多模态反馈信息并输出。

根据本发明的一个实施例，所述反馈信息生成模块配置为根据所述解析结果生成用户意图信息，并根据所述光学字符识别结果和用户意图信息，生成所述多模态反馈信息。

根据本发明的一个实施例，所述反馈信息生成模块配置为根据所述光学字符识别结果生成相应的反馈信息，并判断该反馈信息是否正常，如果该反馈信息正常，则利用利用TTS引擎朗读该反馈信息。

根据本发明的一个实施例，如果所述光学字符识别结果正常，所述字符识别模块则配置为将所述光学字符识别结果发送云端服务器以由所述云端服务器根据所述光学字符识别结果进行商品检索，所述反馈信息生成模块配置为根据所述云端服务器发送来的商品检索结果生成所述多模态反馈信息。

根据本发明的一个实施例，所述装置在对所述多模态交互信息进行解析时，获取多模态交互信息中的识别意图，并开启光学字符识别应用，所述光学字符识别应用运行在机器人操作系统中，所述机器人操作系统装载于所述智能机器人上。

本发明所提供的用于智能机器人的人机交互方法及装置使得智能机器人能够通过主动识别图像中的字符信息来获取到该图像中对应物体的相关信息，从而实现了通过图像中的字符信息来对物体进行识别的功能。相较于现有的人机交互方法，本方法使得智能机器人更加智能化和人性化，从而提高了智能机器人的用户体验。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要的附图做简单的介绍：

图1是根据本发明一个实施例的用于智能机器人的人机交互方法的实现流程示意图；

图2是根据发明另一个实施例的用于智能机器人的人机交互方法的实现流程示意图；

图3是根据发明再一个实施例的用于智能机器人的人机交互方法的实现流程示意图；