[发明专利]一种无监督跨语言句对齐实现方法在审
申请号: | 202111130753.0 | 申请日: | 2021-09-26 |
公开(公告)号: | CN113779978A | 公开(公告)日: | 2021-12-10 |
发明(设计)人: | 陈件;潘丽婷 | 申请(专利权)人: | 上海一者信息科技有限公司 |
主分类号: | G06F40/279 | 分类号: | G06F40/279;G06F40/30;G06F40/194;G06F40/40 |
代理公司: | 上海骁象知识产权代理有限公司 31315 | 代理人: | 赵俊寅 |
地址: | 200090 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种无监督跨语言句对齐实现方法,包括如下步骤:S100、无监督生成句向量;S110、将不同语言文本进行分词,使得原文、译文中的句子被分割为多个独立的词;S120、根据分词结果,获取句子的向量;S200、相似度计算;S300、句匹配。本发明的句对齐是基于无监督生成句向量,根据句子的语义相似度、句长相似度和位置相似度等,进行句子匹配,该方法支持104种语言之间的句子对齐。本发明不再利用规则和机器翻译,相对来说,成本更低,准确率更高。本发明支持多语言,之前针对于不同的语言都要调用机器翻译(调用机器翻译需要额外费用或者投入),现在利用多语言蒸馏后的模型,成本大大降低,根据我们的测试数据,准确率提高25%。 | ||
搜索关键词: | 一种 监督 语言 对齐 实现 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海一者信息科技有限公司,未经上海一者信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111130753.0/,转载请声明来源钻瓜专利网。