[发明专利]形近字字典的生成方法、装置和形近字纠错方法、装置在审
申请号: | 201810865688.8 | 申请日: | 2018-08-01 |
公开(公告)号: | CN109344387A | 公开(公告)日: | 2019-02-15 |
发明(设计)人: | 黄腾玉 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06F3/023 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 汉字 形近字 字形输入法 集合 纠错 字典 编码距离 判断结果 成形 信息处理技术 搜索引擎 应用 | ||
本发明提供一种形近字字典的生成方法、装置和形近字纠错方法、装置,涉及信息处理技术,以解决形近字纠错难的问题而发明。该方法包括:在字形输入法中,获取汉字集合中每个汉字的字形输入法编码;根据汉字的字形输入法编码,获取每个汉字与汉字集合中其他汉字之间的编码距离;根据编码距离判断每个汉字与汉字集合中其他汉字之间是否为形近字,获取形近字判断结果;根据形近字判断结果为每个汉字生成形近字列表;根据每个汉字的形近字列表,为汉字集合生成形近字字典。本发明可以应用在搜索引擎中。
技术领域
本发明涉及信息处理技术领域,尤其涉及一种形近字字典的生成方法和装置。
背景技术
搜索引擎把用户输入的错误查询词自动纠正为正确查询词是搜索过程的重要步骤。在实际的应用过程中,错误查询词主要包括:拼音错误、形近字错误以及多字少字错误等等,其中,形近字错误是最为常见的。含有形近字错误的错误查询词通常不会影响用户阅读和理解,但是对于搜索引擎而言,形近字错误会极大地影响搜索的准确性,从而影响用户使用搜索引擎的满意度。
纠正形近字错误需要依赖于形近字字典,搜索引擎根据形近字字典对错误查询词中存在形近字错误的字或者词进行修正,从而获取正确查询词。然而,现有技术并没有提供一种方法能够准确地判断出两个汉字之间是否近似,进而无法提供准确的形近字字典,由于形近字字典不准确,导致修正形近字错误的难度巨大。
发明内容
本发明实施例提供一种形近字字典的生成方法和装置,以解决修正形近字错误难度大的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供了一种形近字字典的生成方法,包括:在字形输入法中,获取汉字集合中每个汉字的字形输入法编码;根据所述汉字的字形输入法编码,获取每个所述汉字与所述汉字集合中其他汉字之间的编码距离;根据所述编码距离判断每个所述汉字与所述汉字集合中其他汉字之间是否为形近字,获取形近字判断结果;根据所述形近字判断结果为每个所述汉字生成形近字列表;根据每个所述汉字的形近字列表,为所述汉字集合生成形近字字典。
进一步地,所述根据所述编码距离判断每个所述汉字与所述汉字集合中其他汉字之间是否为形近字,获取形近字判断结果包括:将所述编码距离与预先设置的阈值进行比较,如果所述编码距离小于所述阈值,获取所述形近字判断结果为形近字,否则,所述形近字判断结果为非形近字。
进一步地,所述根据所述编码距离判断每个所述汉字与所述汉字集合中其他汉字之间是否为形近字,获取形近字判断结果还包括:如果有两种以上所述字形输入法,综合每种所述字形输入法的形近字判断结果,获取最终形近字判断结果。
第二方面,本发明实施例还提供一种形近字字典的生成装置,包括:
第一获取模块,用于在字形输入法中,获取汉字集合中每个汉字的字形输入法编码;
第二获取模块,用于根据所述第一获取模块获取的所述汉字的字形输入法编码,获取每个所述汉字与所述汉字集合中其他汉字之间的编码距离;
第三获取模块,用于根据所述第二获取模块获取的编码距离判断每个所述汉字与所述汉字集合中其他汉字之间是否为形近字,获取形近字判断结果;
第一生成模块,用于根据所述第三获取模块获取的形近字判断结果为每个所述汉字生成形近字列表;
第二生成模块,用于根据每个所述汉字的形近字列表,为所述汉字集合生成形近字字典。
进一步地,所述第三获取模块包括:
第一获取子模块,用于将所述编码距离与预先设置的阈值进行比较,如果所述编码距离小于所述阈值,获取所述形近字判断结果为形近字,否则,所述形近字判断结果为非形近字。
进一步地,所述第三获取模块还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810865688.8/2.html,转载请声明来源钻瓜专利网。