[发明专利]一种基于区别性特征的神经语音音译方法在审
申请号: | 202111610301.2 | 申请日: | 2021-12-27 |
公开(公告)号: | CN114495939A | 公开(公告)日: | 2022-05-13 |
发明(设计)人: | 郭宇航;王志鹏;陈朔鹰 | 申请(专利权)人: | 北京理工大学 |
主分类号: | G10L15/26 | 分类号: | G10L15/26;G10L15/02;G10L15/08;G10L25/24;G10L25/30;G06F40/40 |
代理公司: | 北京正阳理工知识产权代理事务所(普通合伙) 11639 | 代理人: | 张利萍 |
地址: | 100081 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 区别 特征 神经 语音 音译 方法 | ||
1.一种基于区别性特征的神经语音音译方法,其特征在于,包括以下步骤:
步骤1:将训练集对应的英文文本序列转换为国际音标IPA序列,用转换后的数据集训练神经语音识别模型;
步骤2:将需要音译的语音特征输入训练好的神经语音识别模型,得到英语语音对应的IPA序列;
步骤3:根据区别性特征,确定输出序列每个英文IPA字符的向量表示;同时,将汉语拼音的声母/韵母找到其对应的IPA,根据区别性特征确定该声母/韵母的向量表示;
步骤4:对输出序列的每个IPA向量,计算它和每个汉语拼音的声母和韵母的欧氏距离,以此衡量两个IPA字符之间的相似性;用与输出序列中的英文IPA字符最相近的汉语拼音声母/韵母IPA字符来替换,得到汉语拼音的声母/韵母的IPA序列;
步骤5:根据汉语拼音的声母/韵母及其IPA映射规则,将IPA替换为对应的声母或韵母,得到拼音的声母/韵母序列;将声母韵母序列进行组合,得到最后输出的拼音序列;
其中,如果声母后跟随的是韵母,则将二者中间的空格去掉组合到一起;如果声母后跟随的是声母,则将二者中间的空格去掉组合到一起。
2.如权利要求1所述的一种基于区别性特征的神经语音音译方法,其特征在于,神经语音识别模型采用transformer模型。
3.如权利要求1所述的一种基于区别性特征的神经语音音译方法,其特征在于,步骤3中,将每个IPA字符在每个区别性特征对应一个标注,令“+”表示为数字1,“-”表示为数字-1,“0”表示为数字0,每个IPA字符表示为一个只包含0、-1、1的向量。
4.如权利要求1所述的一种基于区别性特征的神经语音音译方法,其特征在于,步骤3中,对于声母和韵母由多个IPA字符表示,在计算该声母/韵母的向量表示时,将每个IPA字符的向量求平均得到该声母/韵母的向量。
5.如权利要求1所述的一种基于区别性特征的神经语音音译方法,其特征在于,步骤4中,计算向量之间的距离时,采用加权的欧式距离,将音节、辅音、响音、通音、带声、声门延展、声门紧缩和刺耳性的权重调低;将舌尖或舌面、舌体的权重调高。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京理工大学,未经北京理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111610301.2/1.html,转载请声明来源钻瓜专利网。