[发明专利]一种变声方法、装置及电子设备有效
申请号: | 202110455422.8 | 申请日: | 2021-04-26 |
公开(公告)号: | CN113345451B | 公开(公告)日: | 2023-08-22 |
发明(设计)人: | 戈文硕;刘恺;陈伟 | 申请(专利权)人: | 北京搜狗科技发展有限公司 |
主分类号: | G10L21/013 | 分类号: | G10L21/013;G10L15/02;G10L15/06;G10L25/03;G10L25/30 |
代理公司: | 北京华沛德权律师事务所 11302 | 代理人: | 房德权 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 变声 方法 装置 电子设备 | ||
1.一种变声方法,其特征在于,所述方法包括:
获取源说话人的原语音数据;
通过语音识别模型提取所述原语音数据的原始音频识别特征;
将所述原始音频识别特征、目标语音和指定方言输入到目标变声模型中,输出所述指定方言的目标说话人的声学特征;
其中,所述目标变声模型是自适应语音识别模型对至少一个训练说话人提取的自适应音频识别特征,以及所述至少一个训练说话人的声音特征进行模型训练得到的,所述自适应语音识别模型是根据所述至少一个训练说话人对所述语音识别模型进行自适应训练得到的;
所述自适应语音识别模型的训练步骤包括:获取所述至少一个训练说话人的语音数据,其中,所述至少一个训练说话人包括所述目标说话人,以及至少一个训练说话人中存在至少一个说话人的方言为指定方言;
针对所述至少一个训练说话人中的每个训练说话人,将训练说话人的语音数据输入到所述语音识别模型中进行特征提取,提取到训练说话人的音频识别特征,以及训练说话人的声学特征;利用训练说话人的音频识别特征和声学特征对所述语音识别模型进行自适应训练,得到训练说话人对应的自适应语音识别模型。
2.如权利要求1所述的方法,其特征在于,所述目标变声模型的训练步骤,包括:
针对所述至少一个训练说话人中的每个训练说话人,将训练说话人的语音数据输入到训练说话人对应的自适应语音识别模型中进行特征提取,提取到训练说话人的自适应音频识别特征,以及训练说话人的声学特征;
根据每个训练说话人的自适应音频识别特征和声学特征进行模型训练,得到所述目标变声模型。
3.如权利要求2所述的方法,其特征在于,所述根据每个训练说话人的自适应音频识别特征和声学特征进行模型训练,得到所述目标变声模型,包括:
针对每个训练说话人,将训练说话人的自适应音频识别特征作为模型的输入数据,将训练说话人的声学特征作为模型的输出数据进行模型训练,得到已训练的变声模型,并将所述已训练的变声模型作为所述目标变声模型。
4.如权利要求1所述的方法,其特征在于,所述将所述原始音频识别特征、所述目标语音和所述指定方言输入到目标变声模型中,输出携带有所述指定方言的所述目标说话人的声学特征,包括:
将所述原始音频识别特征输入到所述目标变声模型中,并在所述目标变声模型中的编码器中加入所述指定方言的编码,以及在所述目标变声模型的解码器中加入所述目标语音的编码,输出携带有所述指定方言的所述目标说话人的声学特征。
5.如权利要求1所述的方法,其特征在于,在输出所述指定方言的所述目标说话人的声学特征之后,所述方法还包括:
将所述目标说话人的声学特征以所述目标说话人和所述指定方言进行输出。
6.如权利要求5所述的方法,其特征在于,所述将所述目标说话人的声学特征以所述目标说话人和所述指定方言进行输出,包括:
将所述目标说话人的声学特征输入到声码器中,以所述目标说话人和所述指定方言进行输出。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司,未经北京搜狗科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110455422.8/1.html,转载请声明来源钻瓜专利网。