[发明专利]音色选取方法、装置、电子设备及存储介质在审
申请号: | 202210389279.1 | 申请日: | 2022-04-13 |
公开(公告)号: | CN114780784A | 公开(公告)日: | 2022-07-22 |
发明(设计)人: | 文博龙;甘文东;闫影;陈海涛;郭凯旋;李海 | 申请(专利权)人: | 成都爱奇艺智能创新科技有限公司 |
主分类号: | G06F16/61 | 分类号: | G06F16/61;G06F16/683;G06K9/62 |
代理公司: | 北京华夏泰和知识产权代理有限公司 11662 | 代理人: | 卢万腾 |
地址: | 610096 四川省成都市(四川)自*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 音色 选取 方法 装置 电子设备 存储 介质 | ||
1.一种音色选取方法,其特征在于,所述方法包括:
获取待配音的角色对应的原声,并提取所述待配音的角色对应的原声的第一声音特征;
获取预设索引库,其中,所述预设索引库中包括不同声色的声音对应的第二声音特征与相应声色的索引;
根据所述第一声音特征和所述第二声音特征,从所述预设索引库中确定目标索引;
获取所述目标索引中记录的目标音色,并选取所述目标音色为所述待配音的角色对应的匹配音色。
2.根据权利要求1所述的方法,其特征在于,所述第一声音特征包括第一声纹嵌入向量,所述第二声音特征包括第二声纹嵌入向量;
所述根据所述第一声音特征和所述第二声音特征,从所述预设索引库中确定目标索引,包括:
确定所述第一声纹嵌入向量与所述第二声纹嵌入向量之间的声纹相似度;
通过所述声纹相似度,对所述预设索引库中的索引进行排序,从排序结果中确定目标索引。
3.根据权利要求2所述的方法,其特征在于,所述第一声音特征还包括第一韵律嵌入向量,所述第二声音特征还包括第二韵律嵌入向量;
所述通过所述声纹相似度,对所述预设索引库中的索引进行排序,从排序结果中确定目标索引,包括:
通过所述声纹相似度,对所述预设索引库中的索引进行排序,选取排名前N的候选索引;
确定所述第一韵律嵌入向量与所述候选索引中记录的所述第二韵律嵌入向量之间的韵律相似度;
通过所述韵律相似度,对所述候选索引进行排序,从排序结果中确定目标索引。
4.根据权利要求2所述的方法,其特征在于,所述确定所述第一声纹嵌入向量与所述第二声纹嵌入向量之间的声纹相似度,包括:
确定所述第一声纹嵌入向量与所述第二声纹嵌入向量之间的第一余弦距离;
所述通过所述声纹相似度,对所述预设索引库中的索引进行排序,从排序结果中确定目标索引,包括:
通过所述第一余弦距离,对所述预设索引库中的索引进行排序,从排序结果中确定目标索引。
5.根据权利要求3所述的方法,其特征在于,所述确定所述第一韵律嵌入向量与所述候选索引中记录的所述第二韵律嵌入向量之间的韵律相似度,包括:
确定所述第一韵律嵌入向量与所述候选索引中记录的所述第二韵律嵌入向量之间的第二余弦距离;
所述通过所述韵律相似度,对所述候选索引进行排序,从排序结果中确定目标索引,包括:
通过所述第二余弦距离,对所述候选索引进行排序,从排序结果中确定目标索引。
6.根据权利要求1至5任一项所述的方法,其特征在于,所述预设索引库具体通过以下方式得到:
获取预设声音库,其中,所述预设声音库中包括不同音色的声音;
提取所述声音对应的第二声音特征;
建立所述第二声音特征与所述声音的音色之间的索引,组成索引库。
7.一种音色选取装置,其特征在于,所述装置包括:
原声获取模块,用于获取待配音的角色对应的原声;
特征提取模块,用于提取所述待配音的角色对应的原声的第一声音特征;
索引库获取模块,用于获取预设索引库,其中,所述预设索引库中包括不同声色的声音对应的第二声音特征与相应声色的索引;
索引确定模块,用于根据所述第一声音特征和所述第二声音特征,从所述预设索引库中确定目标索引;
音色选取模块,用于获取所述目标索引中记录的目标音色,并选取所述目标音色为所述待配音的角色对应的匹配音色。
8.根据权利要求7所述的装置,其特征在于,所述第一声音特征包括第一声纹嵌入向量,所述第二声音特征包括第二声纹嵌入向量;
所述索引确定模块包括:
声纹相似度确定子模块,用于确定所述第一声纹嵌入向量与所述第二声纹嵌入向量之间的声纹相似度;
索引确定子模块,用于通过所述声纹相似度,对所述预设索引库中的索引进行排序,从排序结果中确定目标索引。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都爱奇艺智能创新科技有限公司,未经成都爱奇艺智能创新科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210389279.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:电机堵转保护装置及电机堵转保护方法
- 下一篇:一种EGR轻型执行器