[发明专利]一种语音理解的方法、装置、电子设备及介质

权利要求书

1.一种语音理解的方法，其特征在于，包括：

接收用户输入的语音指令；

识别所述语音指令，得到所述语音指令对应的第一文本指令；

根据所述语音指令的口音特征和/或方言特征，确定所述语音指令对应的翻译模型；

将所述第一文本指令输入翻译模型，获取所述翻译模型基于平行语料库输出的第二文本指令，所述翻译模型基于平行语料库训练生成；

其中，所述平行语料库包括具有对应关系的第一类文本指令和第二类文本指令，所述第一类文本指令为文本指令语料库中的文本指令，所述第二类文本指令为采用不同的语音转换方式将所述第一类文本指令转换为不同的音频指令后，对所述音频指令的文本识别结果；所述文本指令语料库中包括预设的文本指令，所述文本指令用于控制电子设备执行所述文本指令指示的操作；

所述根据所述语音指令的口音特征和/或方言特征，确定所述语音指令对应的翻译模型，包括：

若确定所述语音指令的口音特征与特定用户的口音特征相符，则根据所述语音指令的方言特征判断所述语音指令是否属于预设方言；若所述语音指令属于所述预设方言，则确定所述语音指令对应的翻译模型为所述预设方言对应的翻译模型；若所述语音指令不属于所述预设方言，则确定所述语音指令对应的翻译模型为所述特定用户对应的翻译模型。

2.根据权利要求1所述的方法，其特征在于，在将所述第一文本指令输入翻译模型，获取所述翻译模型基于平行语料库输出的第二文本指令之前，所述方法还包括：

通过语音识别技术识别所述语音指令的特征。

3.根据权利要求1所述的方法，其特征在于，所述特定用户对应的翻译模型包括所述特定用户的每种口音特征对应的翻译模型；所述确定所述语音指令对应的翻译模型为所述特定用户对应的翻译模型，包括：

若确定所述语音指令的口音特征与所述特定用户的目标口音特征相符，则确定所述语音指令对应的翻译模型为所述特定用户的所述目标口音特征对应的翻译模型。

4.一种语音理解的方法，其特征在于，包括：

将文本指令语料库中的每条文本指令分别采用不同的语音转换方式转换为不同的音频指令，所述文本指令语料库中包括预设的文本指令，所述文本指令用于控制电子设备执行所述文本指令指示的操作；

识别每条文本指令对应的各音频指令，得到每条文本指令对应的各音频指令的文本识别结果；

构建平行语料库，所述平行语料库包括所述文本指令语料库中的每条文本指令和基于每条文本指令得到的各文本识别结果之间的对应关系；

将所述平行语料库作为训练集对深度学习模型进行训练，得到翻译模型；

根据语音指令的口音特征和/或方言特征，确定所述语音指令对应的翻译模型，包括：

若确定所述语音指令的口音特征与特定用户的口音特征相符，则根据所述语音指令的方言特征判断所述语音指令是否属于预设方言；若所述语音指令属于所述预设方言，则确定所述语音指令对应的翻译模型为所述预设方言对应的翻译模型；若所述语音指令不属于所述预设方言，则确定所述语音指令对应的翻译模型为所述特定用户对应的翻译模型。

5.根据权利要求4所述的方法，其特征在于，所述将文本指令语料库中的每条文本指令分别采用不同的语音转换方式转换为不同的音频指令，包括：

将所述文本指令语料库中的每条文本指令分别转换为各预设方言的音频指令；和/或，

将所述文本指令语料库中的每条文本指令分别转换为与各特定用户的口音特征相符的音频指令。

6.根据权利要求4或5所述的方法，其特征在于，所述构建平行语料库，包括：

针对文本指令语料库中的每条文本指令，将所述文本指令转换为音频指令之后，对音频指令的文本识别结果，以及所述文本指令作为一个平行句对；

根据每条文本指令对应的平行句对，构建所述平行语料库。