[发明专利]轻量级时域卷积网络语音增强方法与系统在审

专利信息
申请号: 202011329491.6 申请日: 2020-11-24
公开(公告)号: CN112331224A 公开(公告)日: 2021-02-05
发明(设计)人: 刘明;周彦兵;王贝;孙冲武;赵学华 申请(专利权)人: 深圳信息职业技术学院
主分类号: G10L21/02 分类号: G10L21/02;G10L21/0216;G10L25/30
代理公司: 深圳市添源知识产权代理事务所(普通合伙) 44451 代理人: 罗志伟
地址: 518000 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 轻量级 时域 卷积 网络 语音 增强 方法 系统
【权利要求书】:

1.一种轻量级时域卷积网络语音增强方法,其特征在于:首先,将带噪语音信号进行分帧加窗处理,然后进行短时傅里叶变换,得到带噪语音信号的幅度谱和相位谱,随后将带噪语音信号的幅度谱送入时域卷积网络模型,进行先验信噪比的估计,紧接着利用估计的先验信噪比进行增益函数的估计,最后在幅度域进行滤波降噪,并利用带噪语音信号的相位谱作为增强后的相位,进行语音信号的重构。

2.根据权利要求1所述的轻量级时域卷积网络语音增强方法,其特征在于:语音信号的重构包括反傅里叶变换和重叠相加。

3.根据权利要求1所述的轻量级时域卷积网络语音增强方法,其特征在于:所述时域卷积网络模型的构建过程如下:

1),根据先验信噪比的定义,其取值范围为大于零的任意数,如式子(1)所示:

其中,|Xclean(n,k)|和|Nnoise(n,k)|分别代表纯净语音和噪声信号的幅度谱,n和k分别为帧索引和频率索引,为了降低时域卷积网络模型的学习难度,对其进行值域范围进行压缩,通过对先验信噪比的统计研究发现,其对数变换形式,如式(2)所示,是服从高斯分布的,因此利用一种累积分布函数,对其进行压缩,如式子(3)所示:

ξdB(n,k)=10·log10(ξ(n,k)) (2)

其中,ξdB(n,k)为对数压缩后的先验信噪比,而则是通过累积分布函数压缩后的先验信噪比,其取值范围为[0,1],erf(·)代表的是累积分布函数,μk和σk分别为在不同频点上,通过统计分析得到的ξdB(n,k)所对应的均值和方差;

2),考虑到语音信号之间的时序依赖性,利用空洞卷积设计了一种轻量级的时域卷积网络模型,来学习带噪语音幅度谱|Xnoisy(n,k)|和先验信噪比之间的映射关系。

4.根据权利要求3所述的轻量级时域卷积网络语音增强方法,其特征在于:所述时间卷积网络模型训练时的损失函数用交叉熵来计算,计算式如式子(4)所示,其中yi和分别为理想的先验信噪比和神经网络输出层预测的先验信噪比结果:

5.根据权利要求4所述的轻量级时域卷积网络语音增强方法,其特征在于:对进行降噪滤波的增益函数进行估计,采用的是以贝叶斯理论和最小均方误差准则推导出的增益函数表达形式,如下式子(5)所示:

其中,G(n,k)为估计的增益函数,ξ(n,k)为先验信噪比的估计值,也是积分的下限,但是由于时间卷积网络输出的先验信噪比是压缩变换后的值,因此,还需要对其进行反变换,才能得到式子(5)中所需要的先验信噪比,而反变换的过程如式子(6)和(7)所示:

将反变换后的先验信噪比代入到式子(5)中的增益函数表达式中,便可以得到每一帧带噪语音幅度谱在每个频点上的增益值,与每个频点进行点乘就得到了增强后的语音幅度值,最后利用带噪语音的相位谱便可以合成最终的增强语音信号。

6.根据权利要求1所述的轻量级时域卷积网络语音增强方法,其特征在于:所述时域卷积网络模型由两层全连接层和N个残差模块构成,输入的特征为带噪语音的幅度谱特征。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳信息职业技术学院,未经深圳信息职业技术学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011329491.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top