[发明专利]个性化说话者验证系统和方法有效
申请号: | 202080000759.3 | 申请日: | 2020-01-09 |
公开(公告)号: | CN111418009B | 公开(公告)日: | 2023-09-05 |
发明(设计)人: | 王志铭;姚开盛;李小龙 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G10L17/04 | 分类号: | G10L17/04;G10L17/20 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 艾佳 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 个性化 说话 验证 系统 方法 | ||
1.一种计算机实现的用于个性化说话者验证的方法,包括:
获得说话者的一个或多个语音片段作为正样本,获得所述说话者以外的一人或多人的一个或多个语音片段作为负样本;
将所述说话者的一个或多个语音片段馈送到用于确定人声特性的第一模型,以相应地输出一个或多个正样本向量,作为正人声特性,并将所述说话者以外的一人或多人的一个或多个语音片段馈送到所述第一模型,以相应地输出一个或多个负样本向量,作为负人声特性;
至少基于所述正人声特性和所述负人声特性获得梯度;以及
将所述梯度馈送到所述第一模型,以更新所述第一模型的一个或多个参数,从而获得用于个性化说话者验证的第二模型;
获得用户的语音数据;
将获得的语音数据馈送到所述第二模型,以获得所述用户的输入向量;
对所述一个或多个正样本向量求平均以获得所述说话者的模板向量;
将所述用户的所述输入向量与所述说话者的所述模板向量进行比较;以及
至少基于所述比较验证所述用户是否是所述说话者。
2.根据权利要求1所述的方法,其中,至少基于所述正人声特性和所述负人声特性获得梯度,包括:
将所述一个或多个正样本向量和所述一个或多个负样本向量馈送到神经网络分类器以获得一个或多个梯度向量。
3.根据权利要求2所述的方法,其中,至少基于所述正人声特性和所述负人声特性获得所述梯度,还包括:
对所述一个或多个梯度向量求平均以获得所述说话者的平均梯度向量作为所述梯度。
4.根据权利要求3所述的方法,其中:
将所述梯度馈送到所述第一模型,以更新所述第一模型的一个或多个参数,包括:将所述说话者的所述平均梯度向量馈送到所述第一模型,以更新所述第一模型的所述一个或多个参数;以及
所述一个或多个参数将所述第一模型的不同神经层相关联。
5.根据权利要求2所述的方法,其中,将所述一个或多个正样本向量和所述一个或多个负样本向量馈送到所述神经网络分类器以获得一个或多个梯度向量,包括:
至少基于通过所述神经网络分类器的交叉熵损失函数的反向传播来获得所述梯度。
6.根据权利要求1所述的方法,其中,将所述梯度馈送到所述第一模型,以更新所述第一模型的一个或多个参数,包括:
将所述梯度馈送到所述第一模型,以至少基于所述梯度和在线机器学习率更新所述第一模型的所述一个或多个参数。
7.根据权利要求6所述的方法,其中,将所述梯度馈送到所述第一模型,以至少基于所述梯度和所述在线机器学习率更新所述第一模型的所述一个或多个参数,包括:
在所述梯度以最快的在线机器学习率下降的方向上更新所述一个或多个参数。
8.根据权利要求1所述的方法,其中:
在将所述正样本和所述负样本馈送到所述第一模型以确定人声特性之前,至少已经通过使用于优化说话者分类的第一损失函数和用于优化说话者聚类的第二损失函数共同地最小化训练了所述第一模型。
9.根据权利要求8所述的方法,其中:
所述第一损失函数包括不基于采样的损失函数;以及
所述第二损失函数包括大间隔高斯混合损失函数。
10.一种用于个性化说话者验证的系统,包括:
一个或多个处理器;以及
耦接到所述一个或多个处理器并且其上存储有指令的一个或多个计算机可读存储器,所述指令能够由所述一个或多个处理器执行以执行权利要求1-9中任一项所述的方法。
11.一种用于个性化说话者验证的装置,包括用于执行权利要求1-9中任一项所述的方法的多个模块。
12.一种非暂时性计算机可读存储介质,配置有能够由一个或多个处理器执行以促使所述一个或多个处理器执行权利要求1-9中任一项所述方法的指令。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202080000759.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于个性化优惠的方法和系统
- 下一篇:太阳能电池及其制备方法