[发明专利]一种语音合成方法及语音合成装置有效
申请号: | 201811360232.2 | 申请日: | 2018-11-15 |
公开(公告)号: | CN111192568B | 公开(公告)日: | 2022-12-13 |
发明(设计)人: | 邓利群;胡月志;杨占磊;孙文华 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G10L13/047 | 分类号: | G10L13/047;G10L13/08;G10L13/10;G10L25/30;G10L25/63 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 语音 合成 方法 装置 | ||
1.一种语音合成方法,其特征在于,包括:
获取输入文本的目标情感类型和目标情感强度参数,所述目标情感强度参数用于表征所述目标情感类型对应的情感强度;
获取与所述目标情感类型和所述目标情感强度参数对应的目标情感声学模型;
将所述输入文本的文本特征输入所述目标情感声学模型中得到所述输入文本的声学特征;
根据所述输入文本的声学特征合成目标情感语音;
其中,所述获取与所述目标情感类型和所述目标情感强度参数对应的目标情感声学模型包括:
从情感声学模型集合中选取与所述目标情感类型和所述目标情感强度参数对应的情感声学模型作为所述目标情感声学模型,所述情感声学模型集合包括多个情感声学模型,所述多个情感声学模型包括所述目标情感声学模型;
在从情感声学模型集合中选取与所述目标情感类型和所述目标情感强度参数对应的情感声学模型作为所述目标情感声学模型之前,还包括:
针对不同的情感类型和情感类型的不同情感强度参数,使用中性声学模型和对应的情感语音训练数据进行模型训练得到所述情感声学模型集合,所述情感声学模型集合包括所述目标情感声学模型,所述中性声学模型是使用中性语音训练数据进行模型训练得到的,所述情感语音训练数据对应的声学特征训练误差与所述情感强度参数相关,所述情感语音训练数据对应的声学特征训练误差用于表征在模型训练过程中使用所述情感语音训练数据预测得到的声学特征与所述情感语音训练数据的原始声学特征之间的声学特征损失。
2.根据权利要求1所述的语音合成方法,其特征在于,所述获取输入文本的目标情感类型和目标情感强度参数,包括:
根据所述输入文本的情感标签确定所述目标情感类型;
根据所述输入文本对应的情感强度要求确定所述目标情感强度参数。
3.根据权利要求1或2所述的语音合成方法,其特征在于,所述情感语音训练数据为具备一种或多种情感类型对应的情感的数据,所述中性语音训练数据为不具备任何一种情感类型对应的情感的数据。
4.根据权利要求1所述的语音合成方法,其特征在于,所述情感语音训练数据对应的声学特征训练误差是由误差计算公式进行计算得到的,所述误差计算公式为:
,
其中,所述loss为所述情感语音训练数据对应的声学特征训练误差,所述β为所述情感强度参数,所述y1为所述情感语音训练数据在所述中性声学模型下预测得到的声学特征参数,所述y2为所述情感语音训练数据在所述目标情感声学模型下预测得到的声学特征参数,所述y为所述情感语音训练数据的原始声学特征参数。
5.根据权利要求1或4所述的语音合成方法,其特征在于,所述中性声学模型和所述情感声学模型均是基于隐马尔科夫模型或者深度神经网络模型构造得到的。
6.一种语音合成装置,其特征在于,包括:
处理模块,用于获取输入文本的目标情感类型和目标情感强度参数,所述目标情感强度参数用于表征所述目标情感类型对应的情感强度;获取与所述目标情感类型和所述目标情感强度参数对应的目标情感声学模型;将所述输入文本的文本特征 输入所述目标情感声学模型中得到所述输入文本的声学特征;根据所述输入文本的声学特征合成目标情感语音;
所述处理模块具体用于:
从情感声学模型集合中选取与所述目标情感类型和所述目标情感强度参数对应的情感声学模型作为所述目标情感声学模型,所述情感声学模型集合包括多个情感声学模型,所述多个情感声学模型包括所述目标情感声学模型;
所述处理模块还用于:
针对不同的情感类型和情感类型的不同情感强度参数,使用中性声学模型和对应的情感语音训练数据进行模型训练得到所述情感声学模型集合,所述情感声学模型集合包括所述目标情感声学模型,所述中性声学模型是使用中性语音训练数据进行模型训练得到的,所述情感语音训练数据对应的声学特征训练误差与所述情感强度参数相关,所述情感语音训练数据对应的声学特征训练误差用于表征在模型训练过程中使用所述情感语音训练数据预测得到的声学特征与所述情感语音训练数据的原始声学特征之间的声学特征损失。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811360232.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种视频监控布控方法和布控装置
- 下一篇:行车吊具测试装置