[发明专利]一种模型训练方法、装置、电子设备及存储介质在审
申请号: | 202110592495.1 | 申请日: | 2021-05-28 |
公开(公告)号: | CN113204979A | 公开(公告)日: | 2021-08-03 |
发明(设计)人: | 杨柳祎;李长亮;郭馨泽 | 申请(专利权)人: | 北京金山数字娱乐科技有限公司 |
主分类号: | G06F40/58 | 分类号: | G06F40/58;G06F40/44;G06F40/30;G06N3/08;G06K9/62 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 孟维娜;高莺然 |
地址: | 100085 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 模型 训练 方法 装置 电子设备 存储 介质 | ||
本申请实施例提供了一种模型训练方法、装置、电子设备及存储介质,涉及计算机技术领域,包括:获得第一语料对,第一语料对包括:源语言的第一源文本,以及所述第一源文本对应的、目标语言的第一目标文本;利用所述第一语料对训练样本构建模型,样本构建模型用于:将所述目标语言的文本翻译为所述源语言的文本;获得所述目标语言的第二目标文本,利用所述样本构建模型翻译所述第二目标文本,得到第二源文本;利用第二语料对训练目标翻译模型,其中,所述第二语料对包括:所述第二源文本、第二目标文本,所述目标翻译模型用于:将所述源语言的文本翻译为所述目标语言的文本。应用本申请实施例提供的方案,可以提高模型翻译的准确度。
技术领域
本申请涉及计算机技术领域,特别是涉及一种模型训练方法、装置、电子设备及存储介质。
背景技术
随着人工智能的快速发展,网络模型的应用也越来越广泛。在进行翻译时,可以利用网络模型将源语言的源文本翻译为目标语言的目标文本。然而,网络模型在翻译时,可能存在过翻问题,使得翻译后的目标文本中错误的字符串反复出现,而目标文本的长度是有限制的,这样容易导致目标文本被错误的字符串填充而无法覆盖源文本中所有的字符,翻译准确度差。
例如,假设以英文语言为源语言的源文本为“A的远程控制,鼠标总有大概150px的偏移,操作非常困难”;
将上述源文本翻译为英文语言的目标文本,正确的翻译结果应该是“A's remotecontrol,the mouse always has a displacement of about 150px,the operation isvery difficult”;
而若存在过翻问题,则得到的翻译结果可能是”A remote control,the mousealways has a bit of a bit of a bit of a bit of a bit of a bit of a bit of abit of a bit”。
相关技术中,为了解决上述过翻问题,通常将源文本输入网络模型,获得网络模型翻译得到的多个候选文本,确定每一候选文本对源文本中各个字符的覆盖率,基于上述覆盖率为各个候选文本评分,将评分最高的候选文本作为最终的翻译结果。
上述方案中,由于网络模型本身存在缺陷,即使评分最高的候选结果中也可能存在过翻问题,从而导致最终得到的翻译结果的准确度低。
发明内容
本申请实施例的目的在于提供一种模型训练方法、装置、电子设备及存储介质,以提高模型翻译的准确度。具体技术方案如下:
第一方面,本申请实施例提供了一种模型训练方法,所述方法包括:
获得第一语料对,其中,所述第一语料对包括:源语言的第一源文本,以及所述第一源文本对应的、目标语言的第一目标文本;
利用所述第一语料对训练样本构建模型,其中,所述样本构建模型用于:将所述目标语言的文本翻译为所述源语言的文本;
获得所述目标语言的第二目标文本,利用所述样本构建模型翻译所述第二目标文本,得到第二源文本;
利用第二语料对训练目标翻译模型,其中,所述第二语料对包括:所述第二源文本、第二目标文本,所述目标翻译模型用于:将所述源语言的文本翻译为所述目标语言的文本。
本申请的一个实施例中,所述利用第二语料对训练目标翻译模型,包括:
利用所述第一语料对、第二语料对训练所述目标翻译模型。
本申请的一个实施例中,所述获得第一语料对,包括:
获得包括所述第一源文本、第一目标文本的候选语料对;
对所述候选语料对进行清洗,得到第一语料对。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山数字娱乐科技有限公司,未经北京金山数字娱乐科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110592495.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于氧气湿化瓶的加热器
- 下一篇:基坑位移自动监测系统和监测方法