[发明专利]语音获取方法、装置、电子设备及存储介质有效
申请号: | 202111496026.6 | 申请日: | 2021-12-09 |
公开(公告)号: | CN113903355B | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 智鹏鹏;陈昌滨 | 申请(专利权)人: | 北京世纪好未来教育科技有限公司 |
主分类号: | G10L21/0272 | 分类号: | G10L21/0272;G10L21/0208 |
代理公司: | 北京合智同创知识产权代理有限公司 11545 | 代理人: | 李杰 |
地址: | 100086 北京市海淀区中*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 获取 方法 装置 电子设备 存储 介质 | ||
1.一种语音获取方法,其特征在于,包括:
根据混合信号的幅度信息执行分离处理,获得语音分离掩膜;
根据所述语音分离掩膜和所述混合信号的所述幅度信息,获得语音频谱图,并耦合所述语音频谱图与所述混合信号的相位信息,获得语音复数谱;
针对所述语音复数谱执行增强处理,获得语音增强掩膜;以及
根据所述语音增强掩膜和所述语音分离掩膜,获得语音信号。
2.根据权利要求1所述的语音获取方法,其特征在于,所述针对所述语音复数谱执行增强处理,获得语音增强掩膜包括:
利用复数语音增强模型,针对所述语音复数谱执行增强预测,获得所述语音增强掩膜;
其中,所述复数语音增强模型包括对称设置的多个卷积块和多个反卷积块。
3.根据权利要求2所述的语音获取方法,其特征在于,所述利用复数语音增强模型针对所述语音复数谱执行增强预测,获得所述语音增强掩膜包括:
将所述语音复数谱分别输入每个卷积块的实部卷积单元和虚部卷积单元中执行卷积处理,获得实部卷积信息和虚部卷积信息;
将所述实部卷积信息和所述虚部卷积信息分别输入每个反卷积块的实部反卷积单元和虚部反卷积单元中执行反卷积处理,获得实部预测信息和虚部预测信息;
根据所述实部预测信息和所述虚部预测信息,获得所述语音增强掩膜。
4.根据权利要求3所述的语音获取方法,其特征在于,所述将所述语音复数谱分别输入每个卷积块的实部卷积单元和虚部卷积单元中执行卷积处理,获得实部卷积信息和虚部卷积信息包括:
根据所述语音复数谱的第一实部信息和第一虚部信息,生成实部卷积输入,并根据所述语音复数谱的第二实部信息和第二虚部信息,生成虚部卷积输入;
提供所述实部卷积单元针对所述实部卷积输入执行卷积处理,获得第一实部卷积输出和第二实部卷积输出,并提供所述虚部卷积单元针对所述虚部卷积输入执行卷积处理,获得第一虚部卷积输出和第二虚部卷积输出;
根据所述第一实部卷积输出和所述第一虚部卷积输出,获得所述实部卷积信息,并根据所述第二实部卷积输出和所述第二虚部卷积输出,获得所述虚部卷积信息。
5.根据权利要求3所述的语音获取方法,其特征在于,所述将所述实部卷积信息和所述虚部卷积信息分别输入每个反卷积块的实部反卷积单元和虚部反卷积单元中执行反卷积处理,获得实部预测信息和虚部预测信息包括:
根据所述实部卷积信息的第一实部信息和第一虚部信息,生成实部反卷积输入,并根据所述虚部卷积信息的第二实部信息和第二虚部信息,生成虚部反卷积输入;
提供所述实部反卷积单元针对所述实部反卷积输入执行反卷积处理,获得第一实部反卷积输出和第二实部反卷积输出,并提供所述虚部反卷积单元针对所述虚部反卷积输入执行反卷积处理,获得第一虚部反卷积输出和第二虚部反卷积输出;
根据所述第一实部反卷积输出和所述第一虚部反卷积输出,获得所述实部预测信息,并根据所述第二实部反卷积输出和所述第二虚部反卷积输出,获得所述虚部预测信息。
6.根据权利要求3所述的语音获取方法,其特征在于,所述复数语音增强模型还包括瓶颈层,所述方法还包括:
将所述卷积块输出的所述实部卷积信息和所述虚部卷积信息输入所述瓶颈层中,以建立上下文信息,并将建立有上下文信息的所述实部卷积信息和所述虚部卷积信息输入所述反卷积块的所述实部反卷积单元和所述虚部反卷积单元中执行反卷积处理,获得所述实部预测信息和所述虚部预测信息。
7.根据权利要求1所述的语音获取方法,其特征在于,所述根据所述语音增强掩膜和所述语音分离掩膜,获得语音信号包括:
将所述语音增强掩膜和所述语音分离掩膜进行点乘处理,获得待转换信号;
针对所述待转换信号执行傅里叶逆变换,获得所述语音信号。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京世纪好未来教育科技有限公司,未经北京世纪好未来教育科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111496026.6/1.html,转载请声明来源钻瓜专利网。