[发明专利]一种融合式人机交互方法

说明书

一种融合式人机交互方法，该交互方法融合了触摸式交互和语音式交互的方法，从人工智能的角度实现了人对机器的控制，包括以下步骤：首先对状态模块初始化；然后对使用者下达的命令进行语音采集；系统对命令分析；将获取的命令资源释放，操作结束；对需要执行的命令进行语音播放并文字提示；使用者按照语音播放和文字提示进行选择是否要执行命令。本发明通过将语音式交互和触摸式交互相融合，结合了两者的优点，机器显示屏将同步当前的状态下执行操作，可以用文字的形式或语音输入的方式进行操作，具有操作便利和简单直观的优点，又解决了操作者的意图在机器中间操作不清的问题，使得人与机器的交互更加准确。

技术领域

本发明涉及人机交互智技术，具体涉及一种人机交互方法。

背景技术

随着人工智能技术的发展，使用机器模拟人与使用者交互的应用越来越广泛，分为语音式交互和触摸式交互；现有的语音式交互的形式一般为纯语音模式和问答模式，语音交互机器人主要采用在知识库中预设问题及相应的答案，系统获取到使用者的语音信息后，通过相应的算法转写为文本，将文本信息送入后台系统，到知识库中寻找对应的答案返回给客户，提高服务效率，降低运营成本。

在实际使用中，由于采用关键词、正则表达式、深度学习模型等单一算法，计算出来的结果，答案不够精准，导致回复错误，效果不佳；由于预设定的答案一般为单一结果，对于使用者多问题多意图等信息的解答效果不佳；由于预设的问题及对应的答案单一，设计的流程没有轮询及上下文及历史数据关联机制，导致与使用者交流过程中机械痕迹明显，交互不流畅，体验不佳。例如中国专利申请 CN111653262A公开了一种智能语音交互系统及方法，根据设定规则调度多种算法模型计算并综合计算结果得出最优解，以解决单一算法模型的盲点计算的局限性，达到互补的效果，但是使用者对于系统支持的命令以及交互过程中的有限能力不清楚，有时在机器人识别不了，使用者不知道如何提出关键字来控制机器人。

现有的触摸式交互，即在屏幕上罗列功能，使用触摸的操作方法进行控制，以ARM芯片和FPGA芯片为基础嵌入模块化的控制软件，通过在显示屏上对按键触摸对机器人进行控制，例如中国专利申请 CN111421555A公开了一种高精度机器人的多轴同步控制方法，通过触摸屏和ARM控制器的数据传输实现人机交互；例如中国专利申请 CN111881261A公开了一种物联网多点应答互动智能机器人系统，其中人机显示交互模块是采用HMI智能串口触摸屏实现人机交互，触摸交互方式虽然简洁直观，但没有语音式交互便利，没有语音式交互的自然。

发明内容

本发明的目的提供一种融合式人机交互方法，通过将语音式交互和触摸式交互融合，保留了语音式交互和触摸式交互的优点，两者的缺点也互相弥补，解决了现有技术中人机交互的缺点。

为了实现上述目的，本发明提供一下技术方案：

一种融合式人机交互方法，该交互方法融合了触摸式交互和语音式交互的方法，从人工智能的角度实现了人对机器的控制，该方法具体包括以下步骤：

(1)对状态模块初始化；

(2)对使用者下达的命令进行语音采集；

(3)系统对命令分析；

(4)将获取的命令资源释放，操作结束；

(5)对需要执行的命令进行语音播放并文字提示；

(6)使用者按照语音播放和文字提示进行选择是否要执行命令。

进一步的，所述状态模块包括语音采集模块，命令分析模块、语音播放和文字模块，在一些优选方案中文字模块包括文字，在语音播放的同时以文字的形式出现，让用户在听到播报的同时可以触摸按键进行操作。

进一步的，所述的初始化是指所有状态模块都处于待运行状态，没有实际操作。