[发明专利]发音评测方法、装置、电子设备及可读存储介质在审
申请号: | 202110973191.X | 申请日: | 2021-08-24 |
公开(公告)号: | CN113689882A | 公开(公告)日: | 2021-11-23 |
发明(设计)人: | 邹朋朋;卢恒;印晶晶 | 申请(专利权)人: | 上海喜马拉雅科技有限公司 |
主分类号: | G10L25/51 | 分类号: | G10L25/51;G10L25/03;G10L25/27 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 杨奇松 |
地址: | 201100 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 发音 评测 方法 装置 电子设备 可读 存储 介质 | ||
1.一种发音评测方法,其特征在于,包括:
获得预设文本对应的构图;
获得与所述预设文本对应的待评测音频的音频特征;
基于预先训练好的目标声学模型、所述构图及音频特征,获得音素对齐结果,其中,所述音素对齐结果中包括所述待评测音频对应的各个标准音素的音素描述信息,所述音素描述信息用于描述标准音素对应的发音情况,所述目标声学模型训练时使用的样本音频特征对应的样本音频包括预设连读单词的第一音频组和/或预设弱读单词的第二音频组,所述第一音频组包括所述预设连读单词的标准读音和单词连读时的第一读音,所述第二音频组包括所述预设弱读单词的标准读音和单词弱读时的第二读音;
根据所述音素对齐结果确定评测结果。
2.根据权利要求1所述的方法,其特征在于,所述目标声学模型通过以下方式得到:
基于第一声学模型,对第二训练集进行音素对齐处理,得到所述第二训练集中的样本文本对应的样本对齐信息,其中,所述第一声学模型根据包括发音标准的音频数据的第一训练集训练得到,所述样本对齐信息包括每个单词对应的单词对齐信息;
根据所述样本对齐信息,选出所述预设连读单词和/或所述预设弱读单词;
根据选出的所述预设连读单词和/或所述预设弱读单词,训练得到所述目标声学模型。
3.根据权利要求2所述的方法,其特征在于,所述根据所述样本对齐信息,选出所述预设连读单词和/或所述预设弱读单词,包括:
基于所述样本文本,依次选取目标单词组,其中,所述目标单词组中包括连续的两个单词,所述两个单词包括按照阅读的先后顺序分布的第一单词及第二单词;
根据所述样本文本的样本对齐信息,获得所述目标单词组的对齐信息,其中,所述目标单词组的对齐信息中包括对应的音素序列及所述音素序列中各标准音素对应的音素信息,一个标准音素对应的所述音素信息包括该标准音素的第一后验概率及该标准音素所对应的音素段对应其他音素的第二后验概率;
根据所述目标单词组的对齐信息,得到所述第一单词的末尾标准音素的第一音素信息及所述第二单词的开始标准音素的第二音素信息;
在根据所述第一音素信息及第二音素信息,确定所述第一音素信息及第二音素信息中的第一后验概率均小于预设值且最大第二后验概率对应的音素均不是标准音素的情况下,确定所述目标单词组为连读单词;
从确定出的连读单词中,获得所述预设连读单词。
4.根据权利要求3所述的方法,其特征在于,所述从确定出的连读单词中,获得所述预设连读单词,包括:
统计每个连读单词在所述第二训练集中的第一出现次数;
根据所述第一出现次数,选出所述预设连读单词,其中,每个预设连读单词的第一出现次数大于未被选为预设连读单词的连读单词的第一出现次数,所述预设连读单词的数量小于所述连读单词的数量。
5.根据权利要求2所述的方法,其特征在于,所述根据所述样本对齐信息,选出所述预设弱读单词,包括:
从所述样本对齐信息中依次获取一个目标单词的单词对齐信息,其中,所述单词对齐信息中包括所述目标单词对应的单词音素序列及所述单词音素序列中各标准音素对应的音素信息,一个标准音素对应的音素信息包括该标准音素的音素得分及持续时长;
在根据所述目标单词所对应的单词音素序列中各标准音素的音素信息,确定所述目标单词的一个标准音素的音素得分最低且与其他标准音素的音素得分之间的差异程度满足预设要求、以及该标准音素的持续时长小于预设时长的情况下,确定所述目标单词为弱读单词;
从确定出的弱读单词中,获得所述预设弱读单词。
6.根据权利要求5所述的方法,其特征在于,所述从确定出的弱读单词中,获得所述预设弱读单词,包括:
统计每个弱读单词在所述第二训练集中的第二出现次数;
根据所述第二出现次数,选出所述预设弱读单词,其中,每个预设连读单词的第二出现次数大于未被选为预设弱读单词的弱读单词的第二出现次数,所述预设弱读单词的数量小于所述弱读单词的数量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海喜马拉雅科技有限公司,未经上海喜马拉雅科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110973191.X/1.html,转载请声明来源钻瓜专利网。