[发明专利]作业机械语音交互方法、系统及作业机械

说明书

本发明提供一种作业机械语音交互方法、系统及作业机械，该方法包括：获取作业机械驾驶室内的目标语音信号；基于作业环境噪声样本数据对目标语音信号进行降噪处理，确定降噪音频信号；基于降噪音频信号进行语音识别，确定语音识别结果；基于语音识别结果，控制作业机械的目标执行装置。本发明提供的作业机械语音交互方法、系统及作业机械，基于作业机械在真实作业环境下作业时采集的作业环境噪声样本数据对目标语音信号进行降噪，能够提高语音识别精确度，以准确控制目标执行装置，使得作业机械操作手能够通过语音直接控制目标执行装置，降低长时间手动操作带来的疲劳感，丰富人机交互形式。

技术领域

本发明涉及作业机械技术领域，尤其涉及一种作业机械语音交互方法、系统及作业机械。

背景技术

以挖掘机、起重机和泵送设备为例的作业机械，往往在恶劣嘈杂的环境下作业，且作业机械往往有较多的待控制元器件，需要驾驶员能够兼顾各种待控制元器件的控制操作。

目前在工程机械领域的挖掘机设备，依旧采用常规按钮方式或触摸屏按钮方式控制大灯、空调与发动机转速调整，这样的操控方式使得用户需要长时间用手操作待控制元器件，容易出现疲劳，人机交互方式比较机械单一，交互程度较低。

发明内容

本发明提供一种作业机械语音交互方法、系统及作业机械，用以解决现有技术中使得用户需要长时间用手操作待控制元器件，容易出现疲劳，人机交互方式比较机械单一，交互程度较低的缺陷，实现用户通过语音直接控制目标执行装置，能够降低长时间用手操作带来的疲劳感，能够丰富人机交互的形式，提高交互程度。

本发明提供一种作业机械语音交互方法，包括：

获取作业机械驾驶室内的目标语音信号；

基于作业环境噪声样本数据对所述目标语音信号进行降噪处理，确定降噪音频信号，所述作业环境噪声样本数据为作业机械在真实作业环境下作业时获取的；

基于所述降噪音频信号进行语音识别，确定语音识别结果；

基于所述语音识别结果，控制作业机械的目标执行装置。

根据本发明提供的一种作业机械语音交互方法，所述获取作业机械驾驶室内的目标语音信号，包括：

获取原始声源信号；

基于预存的唤醒词库对所述原始声源信号进行检测，在所述原始声源信号与所述唤醒词库匹配的情况下，从所述原始声源信号中确定目标语音信号。

根据本发明提供的一种作业机械语音交互方法，所述基于所述降噪音频信号进行语音识别，确定语音识别结果，包括：

将所述降噪音频信号与预设指令库进行匹配，确定控制指令。

根据本发明提供的一种作业机械语音交互方法，在所述将所述降噪音频信号与预设指令库进行匹配，确定控制指令之后，还包括：

基于所述控制指令，输出询问请求；

在接收到用户基于所述询问请求输入的确认指令后，基于所述控制指令控制所述作业机械的目标执行装置。

根据本发明提供的一种作业机械语音交互方法，所述基于作业环境噪声样本数据对所述目标语音信号进行降噪处理，确定降噪音频信号，包括：

将所述目标语音信号输入到降噪处理模型中，得到所述降噪处理模型输出的所述降噪音频信号；其中，所述降噪处理模型为以语音样本信号为样本，以与所述语音样本信号对应的作业环境噪声样本数据为样本标签进行训练得到的，所述语音样本信号为从作业机械在多种作业工况下采集到的语音数据。

根据本发明提供的一种作业机械语音交互方法，所述基于所述降噪音频信号进行语音识别，确定语音识别结果，包括：