[发明专利]语音模型训练数据集构建方法及装置有效
申请号: | 202110697465.7 | 申请日: | 2021-06-23 |
公开(公告)号: | CN113450779B | 公开(公告)日: | 2022-11-11 |
发明(设计)人: | 马明;刘宇 | 申请(专利权)人: | 海信视像科技股份有限公司 |
主分类号: | G10L15/06 | 分类号: | G10L15/06;G10L15/08;G10L13/06;G10L13/08;G10L13/10 |
代理公司: | 北京弘权知识产权代理有限公司 11363 | 代理人: | 郭放;许伟群 |
地址: | 266555 山东省青*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 模型 训练 数据 构建 方法 装置 | ||
本申请实施例提供一种语音模型训练数据集构建方法及装置,方法包括:获取多音字样本和非多音字样本后,对多音字样本和非多音字样本分别向量表征。进一步对多音字样本向量表征进行重复采样处理,根据重复采样的多音字样本向量表征构建新的多音字样本向量表征。最后合并多音字样本向量表征,新的多音字样本向量表征以及非多音字样本向量表征,得到构建的语音模型训练数据集。本申请提供的语音模型训练数据集构建方法及提取装置,能够增加语音模型训练数据集中多音字样本向量表征,避免多音字训练样本和非多音字训练样本分布不平衡的情况,进而提升被训练语音模型的转化准确率,提升用户使用体验。
技术领域
本申请涉及语音交互技术领域,尤其涉及一种语音模型训练数据集构建方法及装置。
背景技术
随着人工智能在语音交互领域的发展,智能设备可将用户输入的文本转化为音频。
目前有大量的基于深度学习的端对端文本转音频的语音模型。用给定的数据集训练这些语音模型之后,再将需要转化的文本输入训练之后的语音模型,就能够得到对应的音频。
然而,在文本转音频的过程中,核心难点在于多音字的发音问题。而由于多音字数据在日常生活中的使用比例不高,用于对语音模型进行训练的训练样本中,多音字训练样本较少,多音字训练样本和非多音字训练样本分布不平衡。因此,使用现有训练数据集训练得到的语音模型进行文本转音频操作时,容易将多音字预测为非多音字,转化准确率较低,最终造成用户使用体验较差。
发明内容
本申请提供了一种语音模型训练数据集构建方法及装置,用于解决使用现有训练数据集训练得到的语音模型进行文本转音频操作时,容易将多音字预测为非多音字,转化准确率较低,最终造成用户使用体验较差的问题。
第一方面,本申请实施例提供一种语音模型训练数据集构建方法,该方法包括:
获取语音模型训练样本集,其中,所述语音模型训练样本集包括多音字样本和非多音字样本,所述多音字样本为至少包含一个中文多音字的句子,所述非多音字样本为不包含中文多音字的句子,所述非多音字样本的数量多于所述多音字样本的数量;
对所述多音字样本和所述非多音字样本进行向量表征,得到对应的多音字样本向量表征和非多音字样本向量表征;
对所述多音字样本向量表征进行重复采样处理,以及根据重复采样的所述多音字样本向量表征构建新的样本,得到新的所述多音字样本向量表征;
将所述多音字样本向量表征、所述非多音字样本向量表征以及新的所述多音字样本向量表征合并后,得到构建的语音模型训练数据集。
第二方面,本申请实施例提供一种语音模型训练数据集构建装置,该装置包括:
语音模型训练样本集获取单元,用于执行:获取语音模型训练样本集,其中,所述语音模型训练样本集包括多音字样本和非多音字样本,所述多音字样本为至少包含一个中文多音字的句子,所述非多音字样本为不包含中文多音字的句子,所述非多音字样本的数量多于所述多音字样本的数量;
向量表征单元,用于执行:对所述多音字样本和所述非多音字样本进行向量表征,得到对应的多音字样本向量表征和非多音字样本向量表征;
重采样单元,用于执行:对所述多音字样本向量表征进行重复采样处理;
新数据生成单元,用于执行:根据重复采样的所述多音字样本向量表征构建新的样本,得到新的所述多音字样本向量表征;
数据合并单元,用于执行:将所述多音字样本向量表征、所述非多音字样本向量表征以及新的所述多音字样本向量表征合并后,得到构建的语音模型训练数据集。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于海信视像科技股份有限公司,未经海信视像科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110697465.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置