[发明专利]翻译模型的训练方法、文本处理方法、装置及存储介质在审
申请号: | 201910901021.3 | 申请日: | 2019-09-23 |
公开(公告)号: | CN110598224A | 公开(公告)日: | 2019-12-20 |
发明(设计)人: | 伍海江;袁松岭;王晓利 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F17/28 | 分类号: | G06F17/28;G06N3/08 |
代理公司: | 11270 北京派特恩知识产权代理有限公司 | 代理人: | 李梅香;张颖玲 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种翻译模型的训练方法包括:获取第一训练样本集合;对第一训练样本集合进行去噪处理,以形成相应的第二训练样本集合;通过翻译模型对第一训练样本集合进行处理,以确定翻译模型的初始参数;响应于翻译模型的初始参数,通过翻译模型对第二训练样本集合进行处理,确定翻译模型的更新参数;根据翻译模型的更新参数,通过第一训练样本集合和第二训练样本集合对翻译模型的编码器参数和解码器参数进行迭代更新。本发明还提供了文本处理方法、装置及存储介质。本发明能够使得翻译模型的泛化能力更强,提升翻译模型的训练精度与训练速度,同时还可以有效充分利用已有的噪声语句对模型训练的增益,使得翻译模型能够适应不同的使用场景。 | ||
搜索关键词: | 训练样本集合 翻译 初始参数 更新参数 编码器参数 解码器参数 存储介质 迭代更新 模型训练 使用场景 文本处理 去噪 语句 噪声 响应 | ||
【主权项】:
1.一种翻译模型的训练方法,其特征在于,所述训练方法包括:/n获取第一训练样本集合,其中所述第一训练样本集合包括至少一组带有噪声的语句样本;/n对所述第一训练样本集合进行去噪处理,以形成相应的第二训练样本集合;/n通过翻译模型对所述第一训练样本集合进行处理,以确定所述翻译模型的初始参数;/n响应于所述翻译模型的初始参数,通过所述翻译模型对所述第二训练样本集合进行处理,确定所述翻译模型的更新参数;/n根据所述翻译模型的更新参数,通过所述第一训练样本集合和所述第二训练样本集合对所述翻译模型的编码器参数和解码器参数进行迭代更新。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910901021.3/,转载请声明来源钻瓜专利网。