[发明专利]一种语音理解方法、装置、设备及介质

权利要求书

1.一种语音理解方法，其特征在于，所述方法包括：

获取待处理的语音数据；

通过预先训练完成的语音理解网络，确定所述语音数据的语义识别结果，其中，所述语音理解网络是基于语义识别网络中的输入层分别与语音识别网络中的编码层以及输出层连接后的网络确定的。

2.根据权利要求1所述的方法，其特征在于，通过如下任一种方式获取所述语音理解网络：

将预先训练完成的语义识别网络中的输入层，分别与预先训练完成的语音识别网络中的编码层以及输出层连接，获取原始语音理解网络；基于第一语音样本集中的第一语音数据以及所述第一语音数据对应的第一标签，对所述原始语音理解网络进行训练，其中，所述第一标签用于标识所述第一语音数据对应的第一语义识别结果；

将原始语义识别网络中的输入层，分别与原始语音识别网络中的编码层以及输出层连接，获取原始语音理解网络；基于第一语音样本集中的第一语音数据以及所述第一语音数据对应的第一标签，对所述原始语音理解网络进行训练，其中，所述第一标签用于标识所述第一语音数据对应的第一语义识别结果；

将预先训练完成的语义识别网络中的输入层，分别与原始语音识别网络中的编码层以及输出层连接，获取原始语音理解网络；基于第一语音样本集中的第一语音数据以及所述第一语音数据对应的第一标签，对所述原始语音理解网络进行训练，其中，所述第一标签用于标识所述第一语音数据对应的第一语义识别结果；

将原始语义识别网络中的输入层，分别与预先训练完成的语音识别网络中的编码层以及输出层连接，获取原始语音理解网络；基于第一语音样本集中的第一语音数据以及所述第一语音数据对应的第一标签，对所述原始语音理解网络进行训练，其中，所述第一标签用于标识所述第一语音数据对应的第一语义识别结果。

3.根据权利要求2所述的方法，其特征在于，通过如下方式获取所述训练完成的语义识别网络：

基于预先配置的编码向量、文本样本集中的样本文本数据以及所述样本文本数据对应的第二标签，对原始语义识别网络进行训练；其中，所述第二标签用于标识所述样本文本数据对应的第二语义识别结果。

4.根据权利要求2所述的方法，其特征在于，获取到训练完成的语音识别网络之后，所述获取原始语音理解网络之前，所述方法还包括：

获取第二语音样本集中的任一第二语音数据，所述第二语音数据对应有第三标签，所述第三标签用于标识所述第二语音数据对应的第一情感信息；

通过原始情感分类网络，获取所述第二语音数据对应的第二情感信息；所述原始情感分类网络是根据情感分类器以及所述训练完成的语音识别网络中的编码层确定的；

基于所述第二情感信息以及所述第三标签，对所述原始情感分类网络进行训练，以根据训练完成的情感分类网络中的编码层，对所述训练完成的语音识别网络中的编码层进行更新。

5.根据权利要求2所述的方法，其特征在于，若所述原始语音理解网络是基于预先训练完成的语义识别网络，和/或，预先训练完成的语音识别网络确定的，所述基于第一语音样本集中的第一语音数据以及所述第一语音数据对应的第一标签，对所述原始语音理解网络进行训练包括：

获取任一所述第一语音数据；

通过所述原始语音理解网络，获取所述第一语音数据的第三语义识别结果；

基于所述第三语义识别结果以及所述对应的第一标签，对所述原始语音理解网络包含的参数的参数值进行微调。

6.根据权利要求5所述的方法，其特征在于，所述通过所述原始语音理解网络，获取所述第一语音数据的第三语义识别结果，包括：

通过所述原始语音理解网络的编码层，获取所述第一语音数据对应的至少一个编码向量；

通过所述原始语音理解网络的语音解码层，基于所述至少一个编码向量，获取所述第一语音数据的语音识别结果；

通过所述原始语音理解网络的语义解码层，基于所述至少一个编码向量以及所述语音识别结果，获取所述第一语音数据的第三语义识别结果。