[发明专利]机器翻译模型的训练方法及相关装置有效
申请号: | 202110255893.4 | 申请日: | 2021-03-09 |
公开(公告)号: | CN112990434B | 公开(公告)日: | 2023-06-20 |
发明(设计)人: | 魏文琦;王健宗;张之勇;程宁 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06N3/0455 | 分类号: | G06N3/0455;G06N3/0499;G06N3/084;G06F40/284;G06F18/22 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 熊永强 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请实施例提供了一种机器翻译模型的训练方法及相关装置,该方法包括:通过自注意力层计算待编码单词与预设的第一序列中每个单词之间的相似度,其中,待编码单词为预设的第二序列中第i时刻输入的单词,第二序列为预设的需要通过k个时刻输完的单词序列,第一序列为第二序列的单词中第i个时刻之前输入的单词序列,i和k均为正整数,i小于k;根据相似度计算得到待编码单词的自注意力;将自注意力输入至前馈神经网络中得到输出结果;计算输出结果与自注意力之间的损失值;根据损失值调整机器翻译模型的网络参数。通过本申请实施例,能够提高模型的训练速度。 | ||
搜索关键词: | 机器翻译 模型 训练 方法 相关 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110255893.4/,转载请声明来源钻瓜专利网。