[发明专利]一种文本语料扩充方法有效
申请号: | 202011345026.1 | 申请日: | 2020-11-26 |
公开(公告)号: | CN112446213B | 公开(公告)日: | 2022-10-14 |
发明(设计)人: | 甘涛;成鑫;何艳敏;王志阳 | 申请(专利权)人: | 电子科技大学 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/30;G06N3/04;G06N3/08 |
代理公司: | 电子科技大学专利中心 51203 | 代理人: | 甘茂 |
地址: | 611731 四川省成*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明属于自然语言处理技术领域,具体提供一种文本语料扩充方法,用以克服已有的文本增强方法在生成语料的句式多样性和语义保真性上存在的不足。本发明将词替换法与回译法相结合,并克服了两种方法联合使用带来的不足;首先,通过对同义词哈希表、输入句子等进行标准化处理,同时在词替换中采取按字数不减少的方向进行单向替换的策略,减少了存在错别字的词和口语化的词对回译效果的影响;另外,通过引入掩蔽回译,改善了回译法对专业名词翻译不准确的问题;本发明方法生成的语料,兼顾了句式多样性和语义保真性,尤其适合在初始语料不够充足的情况下的文本语料扩充应用。 | ||
搜索关键词: | 一种 文本 语料 扩充 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于电子科技大学,未经电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011345026.1/,转载请声明来源钻瓜专利网。
- 上一篇:一种鲍苗种底播放流的方法
- 下一篇:一种针对工业应用的标准化报告自动生成方法