[发明专利]一种文本纠正方法及装置有效
申请号: | 201811158046.0 | 申请日: | 2018-09-30 |
公开(公告)号: | CN109408813B | 公开(公告)日: | 2023-07-21 |
发明(设计)人: | 贾亚伟 | 申请(专利权)人: | 北京金山安全软件有限公司 |
主分类号: | G06F40/232 | 分类号: | G06F40/232;G06N3/08 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 李欣;马敬 |
地址: | 100123 北京市朝*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 纠正 方法 装置 | ||
本申请实施例提供了一种文本纠正方法及装置。所述方法包括:获取输入的待纠正的当前文本;将当前文本输入神经网络,神经网络的编码层根据预先训练好的第一网络参数确定当前文本的语义向量和权重,并将语义向量和权重输入解码层;其中,权重用于表示当前文本中各个子文本存在错误的可能性;神经网络的解码层,根据预先训练好的第二网络参数以及语义向量和权重,确定当前文本对应的纠正后文本;获取解码层确定的当前文本对应的纠正后文本。应用本申请实施例提供的方案,能够提高文本纠正时的处理效率。
技术领域
本申请涉及文本处理技术领域,特别是涉及一种文本纠正方法及装置。
背景技术
为了提升用户使用输入法时的便捷性,在输入法客户端中常常设置有对用户已经输入的文本进行纠正的功能。即基于用户输入的当前文本,检测当前文本中的错误,并输出针对错误纠正后的文本。
相关技术中,针对输入文本进行纠错的技术主要是基于预设规则。该预设规则可以是句子中主谓宾的搭配规则。例如,在英语语言中,可以对输入文本中的单词做词性标注,依据预设规则和标注的单词的词性,判断输入文本中存在的语法错误,进而对输入文本做语法纠正。
上述文本纠正方法能够针对部分语法错误的类型进行纠正。但是实际中用户输入时的错误类型非常多,除了语法错误,还存在拼写错误、时态错误等。在这种情况下,可以针对每种错误类型预先建立对应的预设规则。在纠错时,需要将输入文本分别与每种预设规则一一进行匹配,确定输入文本中存在的错误。当预设规则很多时,这种文本纠正方法的处理效率就很低。
发明内容
本申请实施例的目的在于提供了一种文本纠正方法及装置,以提高文本纠正时的处理效率。具体的技术方案如下。
第一方面,本申请实施例提供了一种文本纠正方法,该方法包括:
获取输入的待纠正的当前文本;
将所述当前文本输入神经网络;其中所述神经网络包括编码层和解码层;
所述编码层,根据预先训练好的第一网络参数确定所述当前文本的语义向量和权重,并将所述语义向量和权重输入所述解码层;其中,所述权重用于表示所述当前文本中各个子文本存在错误的可能性;
所述解码层,根据预先训练好的第二网络参数以及所述语义向量和权重,确定所述当前文本对应的纠正后文本;
获取解码层确定的所述当前文本对应的纠正后文本。
可选的,所述语义向量包括所述当前文本的各个子文本的子语义向量,所述权重包括所述当前文本的各个子文本的子权重;所述根据预先训练好的第二网络参数以及所述语义向量和权重,确定所述当前文本对应的纠正后文本的步骤,包括:
采用以下方式确定当前文本对应的纠正后文本的第N个纠正子文本:
获取第N-1个纠正子文本;其中,所述N为正整数,当所述N大于1时,所述第N-1个纠正子文本为:根据第N-1个子语义向量和第N-1个子权重以及获取的第N-2个纠正子文本从预设的文本对象库中确定;所述文本对象库包括各个文本对象;
根据第N个子语义向量和第N个子权重以及所述第N-1个纠正子文本,从所述文本对象库中确定第N个纠正子文本。
可选的,当所述N为1时,所述获取第N-1个纠正子文本的步骤,包括:
将预设文本作为第N-1个纠正子文本,或者将从预设文本库中选择的文本作为第N-1个纠正子文本。
可选的,所述根据第N个子语义向量和第N个子权重以及所述第N-1个纠正子文本,从所述文本对象库中确定第N个纠正子文本的步骤,包括:
根据第N个子语义向量和第N个子权重以及第N-1个纠正子文本,确定所述文本对象库中各个文本对象的评分;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山安全软件有限公司,未经北京金山安全软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811158046.0/2.html,转载请声明来源钻瓜专利网。