[发明专利]一种语音合成方法、装置、智能终端及可读介质有效
申请号: | 201980003174.4 | 申请日: | 2019-12-23 |
公开(公告)号: | CN111133507B | 公开(公告)日: | 2023-05-23 |
发明(设计)人: | 黄东延;盛乐园;熊友军 | 申请(专利权)人: | 深圳市优必选科技股份有限公司 |
主分类号: | G10L13/02 | 分类号: | G10L13/02;G10L25/03;G10L25/27 |
代理公司: | 深圳中细软知识产权代理有限公司 44528 | 代理人: | 彭佳伟 |
地址: | 518000 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 语音 合成 方法 装置 智能 终端 可读 介质 | ||
1.一种语音合成方法,其特征在于,包括:
获取待合成文本,根据预设的语音特征提取算法提取所述待合成文本的待处理梅尔频谱特征;
将所述待处理梅尔频谱特征输入预设的ResUnet网络模型,获取第一中间特征;
对所述待处理梅尔频谱特征进行平均池化处理和第一下采样处理,获取第二中间特征;以所述第二中间特征和所述ResUnet网络模型输出的所述第一中间特征为输入,进行反卷积处理和第一上采样处理,获取与所述待处理梅尔频谱特征对应的目标梅尔频谱特征;
将所述目标梅尔频谱特征转换为语音,生成与所述待合成文本对应的目标语音。
2.根据权利要求1所述的方法,其特征在于,所述将所述待处理梅尔频谱特征输入预设的ResUnet网络模型,获取第一中间特征的步骤,还包括:
通过所述ResUnet网络模型对所述待处理梅尔频谱特征进行第二下采样处理、残差连接处理和第二上采样处理,获取所述第一中间特征。
3.根据权利要求2所述的方法,其特征在于,所述ResUnet网络模型包括上采样模块、至少一个残差连接模块和至少一个下采样模块;
所述将所述待处理梅尔频谱特征输入预设的ResUnet网络模型,获取第一中间特征的步骤,还包括:
通过所述下采样模块对所述待处理梅尔频谱特征进行第二下采样处理;
通过至少一个所述残差连接模块对所述下采样模块输出的结果进行第二下采样处理和残差连接处理;
通过至少一个所述上采样模块对所述残差连接模块输出的结果进行第二上采样处理,并对第二上采样处理之后的输出结果与所述残差连接模块输出的结果模块进行相加处理,获取所述第一中间特征。
4.根据权利要求1所述的方法,其特征在于,所述对所述待处理梅尔频谱特征进行平均池化处理和第一下采样处理,获取第二中间特征的步骤,还包括:
对所述待处理梅尔频谱特征进行至少一次平均池化处理;
在每一次平均池化处理之后,对处理结果进行第一下采样处理;
获取所述第二中间特征。
5.根据权利要求4所述的方法,其特征在于,所述以所述第二中间特征和所述ResUnet网络模型输出的所述第一中间特征为输入,进行反卷积处理和第一上采样处理,获取与所述待处理梅尔频谱特征对应的目标梅尔频谱特征的步骤,还包括:
对所述第一中间特征和所述第二中间特征进行反卷积处理;
对处理结果进行至少一次第一上采样处理;
对第一上采样处理的处理结果和所述第一下采样处理之后的处理结果进行相加处理,并进行反卷积处理;
获取所述目标梅尔频谱特征。
6.一种语音合成装置,其特征在于,包括:
特征提取模块,用于获取待合成文本,根据预设的语音特征提取算法提取所述待合成文本的待处理梅尔频谱特征;
ResUnet模块,用于将所述待处理梅尔频谱特征输入预设的ResUnet网络模型,获取第一中间特征;
后置处理模块,用于对所述待处理梅尔频谱特征进行平均池化处理和第一下采样处理,获取第二中间特征,以所述第二中间特征和所述ResUnet网络模型输出的所述第一中间特征为输入,进行反卷积处理和第一上采样处理,获取与所述待处理梅尔频谱特征对应的目标梅尔频谱特征;
语音合成模块,用于将所述目标梅尔频谱特征转换为语音,生成与所述待合成文本对应的目标语音。
7.根据权利要求6所述的装置,其特征在于,所述ResUnet模块还用于通过所述ResUnet网络模型对所述待处理梅尔频谱特征进行第二下采样处理、残差连接处理和第二上采样处理,获取所述第一中间特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市优必选科技股份有限公司,未经深圳市优必选科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201980003174.4/1.html,转载请声明来源钻瓜专利网。