[发明专利]一种DNN模型训练方法及语音识别方法、装置

说明书

本发明提供了一种DNN模型训练方法及语音识别方法、装置，其中，一种DNN模型训练方法包括：获取训练音频样本对应的语音特征数据及标签序列；将语音特征数据输入DNN模型进行标签预测，确定标签预测路径；计算DNN模型的模型损失函数值；计算DNN模型的峰值损失函数值；确定DNN模型的总损失函数；基于总损失函数对DNN模型进行训练，直至DNN模型满足预设训练要求。通过对DNN模型的模型损失函数、峰值损失函数以及联合得到的总损失函数进行收敛训练，最终得到训练好的DNN模型，通过解决语音识别过程中音频序列与标签序列对齐延迟的问题，大幅提高了解码速度和识别速度。

技术领域

本发明涉及语音识别技术领域，具体涉及一种DNN模型训练方法及语音识别方法、装置。

背景技术

随着人工智能的不断发展，语音识别逐渐成为各种智能设备所具备的必不可少的功能之一。为保证语音识别的准确性，通常需要将输入的声音序列与输出的标签序列的长度进行对齐，但将声音序列的长度与输出的标签序列的长度进行对齐的过程需要耗费大量的时间和人力。为了解决此问题，CTC(Connectionist Temporal Classification)时序分类算法被提出，基于深度神经网络(Deep Neural Networks，DNN)模型，通过CTC时序分类算法可以计算每一帧音频所对应的标签并在输出时将静音帧对应的空白标签去掉，得到最终的标签序列，实现将音频序列与标签序列的直接对齐。但由于CTC时序分类算法中会对静音帧赋予空白标签，在包含CTC时序分类算法的DNN模型训练的过程中，由开始标签到结束标签的路径不止一条，在不同标签路径中，空白标签的数量和位置都不相同，而CTC时序分类算法对于概率最高的标签出现的位置并不在意，导致均方根即Peak值出现的位置不固定，不一定会出现在对应的帧的位置，就会导致对齐延迟，进而造成解码速度慢、识别速度慢的问题。

发明内容

因此，本发明要解决的技术问题在于克服现有技术中语音识别过程中由于训练的DNN模型存在对齐延迟，导致解码速度慢、识别速度慢的缺陷，从而提供一种DNN模型训练方法及语音识别方法、装置。

根据第一方面，本发明实施例提供了一种DNN模型训练方法，所述方法包括：

获取训练音频样本对应的语音特征数据及标签序列；

将所述语音特征数据输入DNN模型进行标签预测，确定标签预测路径；

基于所述标签预测路径的概率计算所述DNN模型的模型损失函数值；

基于所述标签预测路径分别计算所述训练音频样本中每个音频帧的位置与其对应的标签序列中心点的距离；

基于所述训练音频样本中每个音频帧的位置与其对应的标签序列中心点的距离，计算所述DNN模型的峰值损失函数值；

基于所述模型损失函数值和所述峰值损失函数值，确定所述DNN模型的总损失函数；

基于所述总损失函数对所述DNN模型进行训练，直至所述DNN模型满足预设训练要求。

可选地，所述基于所述标签预测路径的概率计算所述DNN模型的模型损失函数值，包括：

获取当前音频帧对应的各标签预测路径的概率；

基于每条标签预测路径的概率，确定所述当前音频帧对应的总路径的概率；

基于每个音频帧对应的总路径的概率，计算所述DNN模型的模型损失函数值。

可选地，所述基于所述标签预测路径分别计算所述训练音频样本中每个音频帧的位置与其对应的标签序列中心点的距离，包括：

基于当前音频帧的语音特征数据计算当前音频帧的峰值并获取所述峰值的位置；

计算与当前音频帧对应的标签序列的中心点位置；