[发明专利]文本纠错及其模型训练方法、装置、存储介质及设备在审
申请号: | 202211529540.X | 申请日: | 2022-11-30 |
公开(公告)号: | CN115730585A | 公开(公告)日: | 2023-03-03 |
发明(设计)人: | 吴邦誉;林洋港;杨卫强;朱浩齐 | 申请(专利权)人: | 杭州网易智企科技有限公司 |
主分类号: | G06F40/232 | 分类号: | G06F40/232;G06F40/30;G06F18/214;G06F18/24;G06F18/25;G06N3/0464;G06N3/08 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 孙宝海 |
地址: | 310052 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 纠错 及其 模型 训练 方法 装置 存储 介质 设备 | ||
本公开示例性实施方式中提供文本纠错及其模型训练方法、装置、存储介质及设备,方法包括:在文本纠错模型训练阶段,对文本数据中的每个字符进行特征提取,得到字符特征,字符特征包括读音特征和字形特征,其中每个字符携带有字符纠错标签,利用字符特征对待训练模型进行训练,直至达到训练停止条件,以将训练得到的模型作为文本纠错模型。使用本公开实施方式,使用带有读音特征及字形特征的文本数据训练文本纠错模型,文本纠错模型学习相应字符的字形特征及读音特征,从而能够在文本纠错阶段,通过识别字符的读音特征及字形特征进行文本纠错。因此,本实施例的文本纠错模型能够应用于解决因拼音或五笔输入导致的笔误问题,提升文本纠错精度。
技术领域
本公开的实施方式涉及图像显示技术领域,更具体地,本公开的实施方式涉及文本纠错及其模型训练方法、装置、存储介质及设备。
背景技术
本部分旨在为权利要求中陈述的本公开的实施方式提供背景或上下文,此处的描述不因为包括在本部分中就承认是现有技术。
在各类文本编辑场景中,存在由于作者的笔误或认知错误而导致的错误文本输入,这些错误不仅会影响阅读体验,降低文章质量,在一些特殊场景,如政府公文、公司公告、法律文书,还会造成较大的负面影响。由于人的思维习惯,这些错误作者自身很难发现,往往需要专门的文字校对人员来进行严格的校对审核工作。而人工审核的方式效率低下,无法满足大规模文本数据的纠错工作。
发明内容
在本上下文中,本公开的实施方式提供文本纠错及其模型训练方法、装置、存储介质及设备。
根据本公开的第一个方面,提供一种文本纠错模型训练方法,其包括:
对文本数据中的每个字符进行特征提取,得到字符特征,字符特征包括读音特征和字形特征,其中每个字符携带有字符纠错标签;
利用字符特征对待训练模型进行训练,直至达到训练停止条件,以将训练得到的模型作为文本纠错模型。
根据本公开的第二个方面,一种文本纠错方法,其包括:
对待纠错文本数据进行特征提取,得到字符特征,字符特征包括读音特征和字形特征;
将字符特征输入文本纠错模型,输出预测文本。
根据本公开的第三个方面,提供一种文本纠错模型训练装置,其包括:
第一特征提取模块,对文本数据中的每个字符进行特征提取,得到字符特征,字符特征包括读音特征和字形特征,其中每个字符携带有字符纠错标签;
训练模块,利用字符特征对待训练模型进行训练,直至达到训练停止条件,以将训练得到的模型作为文本纠错模型。
根据本公开的第四个方面,提供一种文本纠错装置,其包括:
第二特征提取模块,对待纠错文本数据进行特征提取,得到字符特征,字符特征包括读音特征和字形特征;
预测模块,将字符特征输入文本纠错模型,输出预测文本。
根据本公开的第五个方面,提供一种存储介质,其上存储有计算机程序,计算机程序被执行时实现:第一方面中任一项的文本纠错模型训练方法、或文本纠错方法。
根据本公开的第六个方面,提供一种电子设备,包括:显示器;处理单元;以及存储单元,用于存储处理单元的可执行指令;其中,处理单元配置为经由执行可执行指令来执行:第一方面中任一项的文本纠错模型训练方法、或文本纠错方法。
本公开示例性实施方式中提供文本纠错及其模型训练方法、装置、存储介质及设备,方法包括:在文本纠错模型训练阶段,对文本数据中的每个字符进行特征提取,得到字符特征,字符特征包括读音特征和字形特征,其中每个字符携带有字符纠错标签,利用字符特征对待训练模型进行训练,直至达到训练停止条件,以将训练得到的模型作为文本纠错模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州网易智企科技有限公司,未经杭州网易智企科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211529540.X/2.html,转载请声明来源钻瓜专利网。