[发明专利]身份矢量x-vector线性变换下的说话人识别方法有效
申请号: | 201910312097.2 | 申请日: | 2019-04-18 |
公开(公告)号: | CN110047504B | 公开(公告)日: | 2021-08-20 |
发明(设计)人: | 徐珑婷;张光林;赵萍;张磊;季云云 | 申请(专利权)人: | 东华大学 |
主分类号: | G10L25/18 | 分类号: | G10L25/18;G10L25/24;G10L25/30;G10L25/60;G10L15/02;G10L15/06 |
代理公司: | 上海申汇专利代理有限公司 31001 | 代理人: | 翁若莹;柏子雵 |
地址: | 201600 上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 身份 矢量 vector 线性变换 说话 识别 方法 | ||
1.基于身份矢量x-vector线性变换下的说话人识别方法,其特征在于,包括如下步骤:
步骤1、提取说话人的训练语音的梅尔频率倒谱系数作为说话人的特征;
步骤2、利用步骤1获得的特征采用深度神经网络结构训练x-vector模型,建立身份矢量x-vector模型,从而获得身份矢量x-vector;
步骤3、利用步骤1获得的特征基于EM算法训练i-vector模型,建立身份矢量i-vector模型,从而获得身份矢量i-vector;
步骤4、认为同一个说话人的i-vector和x-vector投影到同一个矢量中,基于EM算法训练得到平行因子分析器的参数,从而完成平行因子分析器的训练;
考虑到不同身份矢量可以映射到同一个矢量空间,采用平行因子分析的方法得到这个共同的矢量;
第l个说话人的身份矢量i-vector表示为φi(l,1),…,φi(l,k),身份矢量x-vector表示为φx(l,1),…,φx(l,k),其中,k表示该说话人的输入语音的数量,φi(l,k)表示第l个说话人的身份矢量的第k段语音的身份矢量i-vector,φx(l,k)表示第l个说话人的身份矢量的第k段语音的身份矢量x-vector,同一个说话人的身份矢量i-vector和身份矢量x-vector可以投影到同一个矢量中,因此可以表示为其中,μi表示身份矢量i-vector的平均向量;μx表示身份矢量x-vector的平均向量;Fi表示i-vector对应的投影矩阵;Fx表示x-vector对应的投影矩阵;h(l)表示第l个说话人的隐变量;εi(l,k)表示第l个说话人的身份矢量的第k段语音的身份矢量i-vector在线性变换后的残余矢量,εi~N(0,Σi),Σi表示i-vector的协方差矩阵,N(0,Σi)表示εi满足矩阵为0,协方差为Σi的正态分布;εx(l,k)表示表示第l个说话人的身份矢量的第k段语音的身份矢量x-vector在线性变换后的残余矢量,εx~N(0,Σx),Σx表示残差εx的协方差矩阵,N(0,Σx)表示εx满足矩阵为0,协方差为Σx的正态分布;通过EM算法,得到平行因子分析器的参数θ={μi,Fi,Σi,μx,Fx,Σx};
步骤5、通过线性变换器,在平行因子分析器的参数中保留x-vector对应的参数,在线性变换器基础上,将身份矢量xl-vector用x-vector的线性变换表达出来,从而建立身份矢量xl-vector模型,获得身份矢量xl-vector;
步骤6、利用身份矢量xl-vector采用EM算法对PLDA的参数模型进行更新,完成对PLDA模型的训练;
步骤7、测试阶段的说话人识别
将注册语音已经对应的待识别语音进行特征提取后通过身份矢量x-vector模型获得身份矢量x-vector,将身份矢量x-vector输入训练后的线性变换器得到新的身份矢量xl-vector,最后将身份矢量xl-vector输入到训练后的PLDA模型,从而得到说话人识别结果。
2.根据权利要求1所述身份矢量x-vector线性变换下的说话人识别方法,其特征在于:步骤6中,根据x-vector对应的参数θx={μx,Fx,Σx}上,将线性变换后的身份矢量xl-vector表示为其中,表示xl-vector的后验协方差将其进一步写成φxl=Aφx-b的形式,A、b为线性参数,从而将身份矢量xl-vector表示成x-vector的线性变换方式。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东华大学,未经东华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910312097.2/1.html,转载请声明来源钻瓜专利网。