[发明专利]一种基于特征剪裁和平移的语音识别数据增强方法在审
申请号: | 202111344696.6 | 申请日: | 2021-11-15 |
公开(公告)号: | CN114171012A | 公开(公告)日: | 2022-03-11 |
发明(设计)人: | 郭宇航;程浩东;陈朔鹰;吴丽婷 | 申请(专利权)人: | 北京理工大学 |
主分类号: | G10L15/06 | 分类号: | G10L15/06;G10L25/03 |
代理公司: | 北京正阳理工知识产权代理事务所(普通合伙) 11639 | 代理人: | 王松 |
地址: | 100081 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 特征 剪裁 平移 语音 识别 数据 增强 方法 | ||
1.一种基于特征剪裁和平移的语音识别数据增强方法,其特征在于,包括以下步骤:
首先,对输入的语音片段,将其音频信号的波形文件输入到系统模型中进行特征提取,得到音频信号的特征矩阵F,该二维矩阵即为特征值;
然后,根据随机选取裁剪时间段的长度的上限,采样得到随机选取裁剪时间段的起点和长度;根据随机选取裁剪频率段的长度上限,采样得到随机选取裁剪频率段的起点和长度;
之后,根据随机选取裁剪时间段的起点和长度,生成时间裁剪平移矩阵L;根据随机选取裁剪频率段的起点和长度,生成频率裁剪平移矩阵R;
随后,使用时间裁剪平移矩阵L、频率裁剪平移矩阵R,对特征矩阵F做矩阵变换,得到新的音频信号特征
最后,利用新的音频信号特征训练语音识别模型,完成语音识别数据增强。
2.如权利要求1所述的一种基于特征剪裁和平移的语音识别数据增强方法,其特征在于,二维数组F中,第一维代表时间,第二维代表频率,其矩阵大小为M×N,其中,常数M表示使用的音频信号特征在时间维度的长度,常数N表示使用的音频信号特征在频率维度的长度;
设变量t表示随机选取裁剪时间段的长度,设常数T表示随机选取裁剪时间段的长度t的上限,设变量t0表示随机选取裁剪时间段的起点,设常数K表示随机选取裁剪频率段的长度上限,设变量k表示随机选取裁剪频率段的长度;
从0到T中均匀采样一个值t作为裁剪时间段的长度,从0到M-t中均匀采样一个值t0作为裁剪时间端的起点;根据t和t0,生成时间裁剪平移矩阵L:
其中,E1表示形状为t0×t0的单位矩阵,E2表示形状为(M-t-t0)×(M-t-t0)的单位矩阵;
从0到K中,均匀采样一个值k作为裁剪频率段的长度,从0到N-k中,均匀采样一个值k0作为裁剪频率段的起点;根据k和k0,生成裁剪平移矩阵R:
其中,E3表示形状为k0×k0的单位矩阵,E4表示形状为(N-k-k0)×(N-k-k0)的单位矩阵。
3.如权利要求1所述的一种基于特征剪裁和平移的语音识别数据增强方法,其特征在于,利用音频信号特征使用Transformer架构的端到端模型进行训练。
4.如权利要求1所述的一种基于特征剪裁和平移的语音识别数据增强方法,其特征在于,对音频信号的波形文件进行特征提取,采用MFCC方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京理工大学,未经北京理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111344696.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于建筑的振震双控的隔振装置及安装方式
- 下一篇:一种贴膜治具