[发明专利]一种语音识别方法、装置、电子设备以及存储介质在审
申请号: | 202110610069.6 | 申请日: | 2021-06-01 |
公开(公告)号: | CN113327586A | 公开(公告)日: | 2021-08-31 |
发明(设计)人: | 汪雪;黄石磊;程刚 | 申请(专利权)人: | 深圳市北科瑞声科技股份有限公司 |
主分类号: | G10L15/02 | 分类号: | G10L15/02;G10L15/16;G10L15/26;G10L25/24 |
代理公司: | 深圳智汇远见知识产权代理有限公司 44481 | 代理人: | 刘洁;牛悦涵 |
地址: | 518036 广东省深圳市福田区梅林街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 语音 识别 方法 装置 电子设备 以及 存储 介质 | ||
1.一种语音识别方法,其特征在于,所述方法包括:
获取音频数据,对所述音频数据进行频谱分析,生成所述音频数据的梅尔倒谱图;
利用预先训练好的音频识别模型对所述梅尔倒谱图进行特征提取,得到特征音频信号,并识别所述特征音频信号的音素序列;
对所述音素序列进行文字提取,将文字提取的结果作为所述音频数据的识别结果。
2.如权利要求1所述的语音识别方法,其特征在于,所述对所述音频数据进行频谱分析,生成所述音频数据的梅尔倒谱图,包括:
对所述音频数据进行预处理,并将预处理后的音频数据进行短时傅里叶变换,得到所述音频数据的声谱图;
对所述声谱图进行梅尔谱滤波,并将梅尔谱滤波后的声谱图进行倒谱分析,得到所述音频数据的初始梅尔倒谱图;
对所述初始梅尔倒谱图进行离散变换,得到所述音频数据的梅尔倒谱图。
3.如权利要求1所述的语音识别方法,其特征在于,所述利用预先训练好的音频识别模型对所述梅尔倒谱图进行特征提取之前,还包括:
获取训练倒谱图及对应的第一特征音频信号,从所述第一特征音频信号中提取音素序列,得到第一音素序列;
对所述训练倒谱图进行频谱增强,将频谱增强后的训练倒谱图和所述训练倒谱图作为模型训练数据;
将所述模型训练数据输入所述音频识别模型的卷积模块中,以输出所述模型训练数据的第二特征音频信号,并利用所述音频识别模型的音素识别模块识别所述第二特征音频信号的第二音素序列;
根据所述第一特征音频信号、第二特征音频信号、第一音素序列以及第二音素序列,计算所述音频识别模型的训练损失;
若所述训练损失不满足预设条件,调整所述音频识别模型的参数,并返回将所述模型训练数据输入所述音频识别模型的卷积模块中的步骤;
若所述训练损失满足预设条件,得到训练好的音频识别模型。
4.如权利要求3所述的语音识别方法,其特征在于,所述将所述模型训练数据输入所述音频识别模型的卷积模块中,以输出所述模型训练数据的第二特征音频信号,包括:
利用所述卷积模块中的卷积层对所述模型训练数据进行卷积操作,得到初始特征音频信号;
利用所述卷积模块中的线性整流层对所述初始特征音频信号进行线性调整;
利用卷积模块中的池化层对线性调整后的初始特征音频信号进行降维;
利用所述卷积模块中的全连接层输出降维后的初始特征音频信号,得到第一特征音频信号。
5.如权利要求3所述的语音识别方法,其特征在于,所述利用所述音频识别模型的音素识别模块识别所述第二特征音频信号的第二音素序列,包括:
利用所述音素识别模块中的输入层接收所述第二特征音频信号,并设置所述第二特征音频信号的延时数据;
根据所述延时数据,利用所述音素识别模块中的隐藏层提取所述第二特征音频信号的音素序列;
利用所述音素识别模块中的输出层输出提取的音素序列,得到第二音素序列。
6.如权利要求3所述的语音识别方法,其特征在于,所述根据所述第一特征音频信号、第二特征音频信号、第一音素序列以及第二音素序列,计算所述音频识别模型的训练损失,包括:
根据所述第一特征音频信号及第二特征音频信号,计算所述音频识别模型的第一训练损失;
根据所述第一音素序列以及第二音素序列,计算所述音频识别模型的第二训练损失;
根据所述第一训练损失和第二训练损失,计算所述音频识别模型的训练损失。
7.如权利要求1至6中任意一项所述的语音识别方法,其特征在于,所述对所述音素序列进行文字提取,包括:
计算从所述音素序列的文字生成概率;
根据所述文字生成概率,识别所述音素序列之间的文字信息关系,根据所述文字信息关系,生成对应的文字。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市北科瑞声科技股份有限公司,未经深圳市北科瑞声科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110610069.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种多组分抗静电纱及其纺制方法
- 下一篇:一种清洁设备