[发明专利]文本处理方法及装置、模型训练方法及装置有效
申请号: | 202110331040.4 | 申请日: | 2021-03-29 |
公开(公告)号: | CN112800779B | 公开(公告)日: | 2021-08-31 |
发明(设计)人: | 王超超;王为磊;屠昶旸 | 申请(专利权)人: | 智慧芽信息科技(苏州)有限公司 |
主分类号: | G06F40/44 | 分类号: | G06F40/44;G06F40/289;G06F40/211;G06F40/30;G06N3/08 |
代理公司: | 北京布瑞知识产权代理有限公司 11505 | 代理人: | 孟潭 |
地址: | 215000 江苏省苏州市苏州工业*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本公开提供了一种文本处理方法及装置、模型训练方法及装置,涉及数据处理技术领域。该文本处理方法包括:基于第一语言文本确定第一语言文本模块,并基于第二语言文本确定第二语言文本模块;分别对第一语言文本模块和第二语言文本模块进行句词拆分操作,以生成多个第一语言文本单元和多个第二语言文本单元;基于多个第一语言文本单元和多个第二语言文本单元确定第一语言文本模块和第二语言文本模块对应的平行句对。本公开充分利用了文本的结构特征,并借助了句词拆分操作将相应的文本模块转换为包括碎片化的分句分词的文本单元,因此,本公开能够充分顾及句子间的潜在语义信息,进而能够有效提升平行句对的构建效果。 | ||
搜索关键词: | 文本 处理 方法 装置 模型 训练 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于智慧芽信息科技(苏州)有限公司,未经智慧芽信息科技(苏州)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110331040.4/,转载请声明来源钻瓜专利网。