[发明专利]语音合成方法和装置在审
申请号: | 202010253084.5 | 申请日: | 2020-04-02 |
公开(公告)号: | CN111477210A | 公开(公告)日: | 2020-07-31 |
发明(设计)人: | 殷翔 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G10L13/02 | 分类号: | G10L13/02;G10L13/047;G10L13/08 |
代理公司: | 北京海智友知识产权代理事务所(普通合伙) 11455 | 代理人: | 吴京顺 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 合成 方法 装置 | ||
1.一种语音合成方法,包括:
获取文本;
确定所述文本的语音学特征;
将所述语音学特征输入至预先训练的、目标用户对应的语音合成模型,得到所述目标用户针对所述文本的语音数据,其中,所述语音合成模型基于所述目标用户的歌唱数据训练得到。
2.根据权利要求1所述的方法,其中,所述语音合成模型包括声学特征预测模型和声码器;以及
所述将所述语音学特征输入至预先训练的、目标用户对应的语音合成模型,得到所述目标用户针对所述文本的语音数据,包括:
将所述文本的语音学特征输入至所述声学特征预测模型,得到输入的语音学特征对应的声学特征;
将得到的声学特征输入至所述声码器,得到输入的声学特征对应的语音数据。
3.根据权利要求2所述的方法,其中,所述声学特征预测模型的训练数据包括所述目标用户的歌唱数据的语音学特征和声学特征,所述声码器的训练数据包括所述目标用户的歌唱数据和对应的声学特征。
4.根据权利要求2所述的方法,其中,所述声学特征预测模型的训练数据还包括样本用户集中的用户的说话数据和/或歌唱数据的语音学特征和声学特征,所述样本用户集不包括所述目标用户。
5.根据权利要求1-4之一所述的方法,其中,所述语音学特征包括以下至少一项:音素特征、声调特征、音高特征。
6.根据权利要求5所述的方法,其中,所述音高特征使用文本对应的语音对应的MIDI文件表示。
7.根据权利要求5所述的方法,其中,所述语音学特征还包括韵律特征,其中,韵律特征用于表征文本对应的语音中的各个音素分别在其所在的词语和/或句子的位置。
8.一种语音合成装置,其中,所述装置包括:
获取单元,被配置成获取文本;
确定单元,被配置成确定所述文本的语音学特征;
合成单元,被配置成将所述语音学特征输入至预先训练的、目标用户对应的语音合成模型,得到所述目标用户针对所述文本的语音数据,其中,所述语音合成模型基于所述目标用户的歌唱数据训练得到。
9.一种电子设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
10.一种计算机可读介质,其上存储有计算机程序,其中,该程序被处理器执行时实现如权利要求1-7中任一所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010253084.5/1.html,转载请声明来源钻瓜专利网。