[发明专利]一种基于特征剪裁和平移的语音识别数据增强方法在审

专利信息
申请号: 202111344696.6 申请日: 2021-11-15
公开(公告)号: CN114171012A 公开(公告)日: 2022-03-11
发明(设计)人: 郭宇航;程浩东;陈朔鹰;吴丽婷 申请(专利权)人: 北京理工大学
主分类号: G10L15/06 分类号: G10L15/06;G10L25/03
代理公司: 北京正阳理工知识产权代理事务所(普通合伙) 11639 代理人: 王松
地址: 100081 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 特征 剪裁 平移 语音 识别 数据 增强 方法
【权利要求书】:

1.一种基于特征剪裁和平移的语音识别数据增强方法,其特征在于,包括以下步骤:

首先,对输入的语音片段,将其音频信号的波形文件输入到系统模型中进行特征提取,得到音频信号的特征矩阵F,该二维矩阵即为特征值;

然后,根据随机选取裁剪时间段的长度的上限,采样得到随机选取裁剪时间段的起点和长度;根据随机选取裁剪频率段的长度上限,采样得到随机选取裁剪频率段的起点和长度;

之后,根据随机选取裁剪时间段的起点和长度,生成时间裁剪平移矩阵L;根据随机选取裁剪频率段的起点和长度,生成频率裁剪平移矩阵R;

随后,使用时间裁剪平移矩阵L、频率裁剪平移矩阵R,对特征矩阵F做矩阵变换,得到新的音频信号特征

最后,利用新的音频信号特征训练语音识别模型,完成语音识别数据增强。

2.如权利要求1所述的一种基于特征剪裁和平移的语音识别数据增强方法,其特征在于,二维数组F中,第一维代表时间,第二维代表频率,其矩阵大小为M×N,其中,常数M表示使用的音频信号特征在时间维度的长度,常数N表示使用的音频信号特征在频率维度的长度;

设变量t表示随机选取裁剪时间段的长度,设常数T表示随机选取裁剪时间段的长度t的上限,设变量t0表示随机选取裁剪时间段的起点,设常数K表示随机选取裁剪频率段的长度上限,设变量k表示随机选取裁剪频率段的长度;

从0到T中均匀采样一个值t作为裁剪时间段的长度,从0到M-t中均匀采样一个值t0作为裁剪时间端的起点;根据t和t0,生成时间裁剪平移矩阵L:

其中,E1表示形状为t0×t0的单位矩阵,E2表示形状为(M-t-t0)×(M-t-t0)的单位矩阵;

从0到K中,均匀采样一个值k作为裁剪频率段的长度,从0到N-k中,均匀采样一个值k0作为裁剪频率段的起点;根据k和k0,生成裁剪平移矩阵R:

其中,E3表示形状为k0×k0的单位矩阵,E4表示形状为(N-k-k0)×(N-k-k0)的单位矩阵。

3.如权利要求1所述的一种基于特征剪裁和平移的语音识别数据增强方法,其特征在于,利用音频信号特征使用Transformer架构的端到端模型进行训练。

4.如权利要求1所述的一种基于特征剪裁和平移的语音识别数据增强方法,其特征在于,对音频信号的波形文件进行特征提取,采用MFCC方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京理工大学,未经北京理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111344696.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top