[发明专利]语音验证方法、语音验证模型的训练方法及相关装置在审
申请号: | 202210444072.X | 申请日: | 2022-04-25 |
公开(公告)号: | CN115064174A | 公开(公告)日: | 2022-09-16 |
发明(设计)人: | 陈庭威;黄景标;方瑞东;林聚财;刘克柱;毛亚朋;黄威震;殷俊 | 申请(专利权)人: | 浙江大华技术股份有限公司 |
主分类号: | G10L17/02 | 分类号: | G10L17/02;G10L17/04;G10L17/06;G10L25/78 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 何倚雯 |
地址: | 310051 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 验证 方法 模型 训练 相关 装置 | ||
1.一种语音验证方法,其特征在于,包括:
对测试语音进行第一特征提取,得到所述测试语音的音频特征,并对目标对象发出的参考语音进行所述第一特征提取,得到所述参考语音的音频特征;其中,不同对象所发出语音的音频特征不同;以及
对所述测试语音进行第二特征提取,得到所述测试语音的鉴别特征;其中,所述鉴别特征包含用于鉴别发出所述测试语音的对象是否为活体的特征信息;
基于所述测试语音的音频特征、所述参考语音的音频特征和所述鉴别特征,得到所述测试语音的验证结果;其中,所述验证结果包括所述测试语音是否由所述目标对象说出。
2.根据权利要求1所述的方法,其特征在于,所述基于所述测试语音的音频特征、所述参考语音的音频特征和所述鉴别特征,得到所述测试语音的验证结果,包括:
基于所述测试语音的音频特征和参考语音的音频特征的相似度,得到第一分值,并基于所述鉴别特征,得到第二分值;
基于所述第一分值和所述第二分值,得到所述验证结果。
3.根据权利要求2所述的方法,其特征在于,所述基于所述鉴别特征,得到第二分值,包括:
基于所述鉴别特征进行特征降维,得到发出所述测试语音的对象为活体的可信度;
基于所述可信度进行分值映射,得到所述第二分值。
4.根据权利要求2所述的方法,其特征在于,所述基于所述第一分值和所述第二分值,得到所述验证结果,包括:
基于所述第一分值和所述第二分值的乘积,得到所述测试语音的验证分值;
基于所述验证分值与判决门限之间的大小关系,得到所述验证结果。
5.根据权利要求2所述的方法,其特征在于,所述第一特征提取由对象识别网络执行,所述第二特征提取由语音鉴别网络执行,所述第二分值基于分值映射网络对所述鉴别特征映射得到,所述对象识别网络、所述语音鉴别网络和所述分值映射网络基于样本数据联合训练得到,且在所述联合训练过程中,固定所述对象识别网络的网络参数,并调整所述语音鉴别网络和所述分值映射网络的网络参数;
其中,所述样本数据包括样本测试语音、样本目标对象的样本参考语音和所述样本测试语音的样本验证结果,所述样本验证结果包括所述样本测试语音实际是否由所述样本目标对象说出。
6.根据权利要求5所述的方法,其特征在于,所述对象识别网络在所述联合训练之前基于第一样本语音预训练得到,且所述第一样本语音标注有发出所述第一样本语音的样本对象。
7.根据权利要求5所述的方法,其特征在于,所述语音鉴别网络在所述联合训练之前基于第二样本语音预训练得到,且所述第二样本语音标注有样本标记,所述样本标记用于表征发出所述第二样本语音的对象是否为活体。
8.一种语音验证模型的训练方法,其特征在于,所述语音验证模型包括对象识别网络和语音鉴别网络,所述方法包括:
获取样本测试语音、样本目标对象的样本参考语音和所述样本测试语音的样本验证结果;其中,所述样本验证结果包括所述样本测试语音实际是否由所述样本目标对象说出;
基于所述对象识别网络对所述样本测试语音进行第一特征提取,得到所述样本测试语音的样本音频特征,并基于所述对象识别网络对所述样本参考语音进行所述第一特征提取,得到所述样本参考语音的样本音频特征;其中,不同样本对象所发出样本语音的样本音频特征不同;以及
基于所述语音鉴别网络对所述样本测试语音进行第二特征提取,得到样本鉴别特征;其中,所述样本鉴别特征包含用于鉴别发出所述样本测试语音的样本对象是否为活体的特征信息;
基于所述样本测试语音的样本音频特征、所述样本参考语音的样本音频特征和所述样本鉴别特征,得到所述样本测试语音的预测验证结果;其中,所述预测验证结果包括所述样本测试语音经预测是否由所述样本目标对象说出;
基于所述样本验证结果与所述预测验证结果之间的差异,调整所述语音验证模型的网络参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大华技术股份有限公司,未经浙江大华技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210444072.X/1.html,转载请声明来源钻瓜专利网。