[发明专利]一种基于提示的机器翻译方法在审
申请号: | 202211347974.8 | 申请日: | 2022-10-31 |
公开(公告)号: | CN115906878A | 公开(公告)日: | 2023-04-04 |
发明(设计)人: | 迟雨桐;冯少辉;李鹏 | 申请(专利权)人: | 北京中科智加科技有限公司 |
主分类号: | G06F40/58 | 分类号: | G06F40/58;G06N3/0455;G06N3/08 |
代理公司: | 北京天达知识产权代理事务所有限公司 11386 | 代理人: | 庞许倩 |
地址: | 100083 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 提示 机器翻译 方法 | ||
1.一种基于提示的机器翻译方法,其特征在于,包括如下步骤:
获取待翻译文本x,识别得到待翻译文本中包括的名词集合Sword;
获得所述名词集合Sword中所有名词对应的名词译文,组成译文集合Sword-trans;
待翻译文本x、名词集合Sword和名词译文集合Sword-trans通过数据构建,得到翻译模型的输入文本xinput及翻译模型的调节矩阵M;其中,所述输入文本包括提示,所述提示为名词译文集合Sword-trans中的所有译文;
使用翻译模型对xinput进行翻译,使用调节矩阵M调节模型的注意力计算,最终输出译文。
2.根据权利要求1的方法,其特征在于,所述数据构建,包括如下步骤:
对所述待翻译文本进行数据清洗,得到清洗后的文本x0;
所述文本x0其后依次拼接名词译文集合Sword-trans中的所有译文,得到翻译模型的输入文本xinput;
构建所述输入文本xinput的对应位置关系的列表Listindex,根据所述列表Listindex确定构建调节矩阵中元素的取值Mij,起始和终止行列插入特殊符号,得到所述调节矩阵M。
3.根据权利要求1或2的方法,所述翻译模型,通过如下步骤训练得到:
获取所需翻译的两个语种的平行语料数据,得到数据集D;
识别所述数据集D中的原文和译文,得到原文名词集合Sword和译文名词集合Sword-trans;
通过数据构建得到D中所有数据的训练样本Xinput和所有数据对应的调节矩阵Mtrain,其中,Xinput=[x1,x2,…,xg],Mtrain=[M1,M2,…,Mg],单条训练样本xi(i∈[1,2,…,g])是增加译文提示后文本xinput和目标译文xgold的文本对,g为数据条数;
将Xinput划分为训练集Dtrain、验证集Dvalid、测试集Dtest,所述调节矩阵Mtrain导入所述翻译模型,用Dtrain训练模型,每轮训练结束用Dvalid进行验证,取验证结果最好的一轮模型作为最终模型。
4.根据权利要求2的方法,其特征在于,构建所述文本的对应位置关系的列表Listindex,包括如下步骤:
将所述翻译模型的输入文本xinput中每一对名词和名词译文在xinput中的位置用一对元组表示;
每个名词-译文位置元组对组成一个子列表;
将所有名词-译文位置元组对所在的子列表连接起来,构成所述文本的对应位置关系的列表Listindex。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中科智加科技有限公司,未经北京中科智加科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211347974.8/1.html,转载请声明来源钻瓜专利网。