[发明专利]用于组织和处理基于特征的数据结构的系统和方法有效
申请号: | 201680002011.0 | 申请日: | 2016-12-14 |
公开(公告)号: | CN107427732B | 公开(公告)日: | 2021-01-29 |
发明(设计)人: | 刘扬;冯超;招琸珩;吴康恒;雷志斌 | 申请(专利权)人: | 香港应用科技研究院有限公司 |
主分类号: | G06F40/242 | 分类号: | G06F40/242;G06F40/232 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 周靖;郑霞 |
地址: | 中国香*** | 国省代码: | 香港;81 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 组织 处理 基于 特征 数据结构 系统 方法 | ||
1.一种用于组织和处理语言拼写检查和自动校正中的基于特征的数据结构的系统,包括:
计算机处理器,其被配置为:
基于高频词的共同特征,使用显式划分或隐式划分将原始词典划分为两个或更多个子词典,其中每个子词典的大小都小于原始词典,并且其中,每个子词典中的内容以层次结构树的方式被组织;
接收输入的人类可读文本,该输入的人类可读文本包含一个或多个错误;
由输入的人类可读文本确定子词典选择特征或选择标准;
基于确定的子词典选择特征或选择标准选择子词典;
执行输入的人类可读文本中的错误附近的一个或多个字符、单词或短语与选择的子词典中的字符、单词和短语的第一匹配,其中,如果输入的人类可读文本中的错误附近的一个或多个字符、单词或短语与子词典中的候选匹配字符、单词或短语之间的相似度在相似程度阈值以上,则找到了匹配;
如果找到了唯一匹配,则返回选择的子词典中的唯一匹配的字符、单词或短语作为纠正错误的输出;
否则,如果找到不止一个候选匹配,则利用上升的相似程度阈值执行输入的人类可读文本中的错误附近的一个或多个字符、单词或短语与选择的子词典中的字符、单词和短语的第二匹配;并且重复第二匹配,直到找到唯一匹配,并返回选择的子词典中的唯一匹配的字符、单词或短语作为纠正错误的输出。
2.根据权利要求1所述的系统,其中,所述显式划分包括:
识别原始词典中的字符、单词和短语之间的高频词的所述共同特征;和
根据所识别的高频词的共同特征的差异值,将原始词典中的字符、单词和短语划分为两个或更多个子词典。
3.根据权利要求1所述的系统,其中,隐式划分包括:
使用字符、单词和短语的Unicode值,确定原始词典中的每个字符、单词和短语的向量空间;
确定原始词典中的字符、单词和短语的向量空间的中心值;和
将原始词典中的字符、单词和短语划分成两个或更多个子词典,使得每个子词典包含向量空间中心在特定值范围内的字符、单词和短语。
4.根据权利要求1所述的系统,其中,通过在比较下确定输入的人类可读文本中的错误附近的一个或多个字符、单词或短语与选择的子词典中的字符、单词和短语之间的Unicode差异,来执行第一匹配和第二匹配。
5.一种用于组织和处理语言拼写检查和自动校正中的基于特征的数据结构的方法,该方法包括:
基于高频词的共同特征,使用显式划分或隐式划分将原始词典划分为两个或更多个子词典,其中每个子词典的大小都小于原始词典,并且其中,以层次结构树的方式组织每个子词典中的内容;
接收输入的人类可读文本,该输入的人类可读文本包含一个或多个错误;
由输入的人类可读文本确定子词典选择特征或选择标准;
基于确定的子词典选择特征或选择标准选择子词典;
执行输入的人类可读文本中的错误附近的一个或多个字符、单词或短语与选择的子词典中的字符、单词和短语的第一匹配,其中,如果输入的人类可读文本中的错误附近的一个或多个字符、单词或短语与子词典中的候选匹配字符、单词或短语之间的相似度在相似程度阈值以上,则找到了匹配;
如果找到了唯一匹配,则返回选择的子词典中的候选匹配字符、单词或短语作为纠正错误的输出;
否则,如果找到不止一个候选匹配,则利用上升的相似程度阈值执行输入的人类可读文本中的错误附近的一个或多个字符、单词或短语与选择的子词典中的字符、单词和短语的第二匹配;并且重复第二匹配,直到找到唯一匹配,并返回选择的子词典中的唯一匹配的字符、单词或短语作为纠正错误的输出。
6.根据权利要求5所述的方法,其中,显式划分包括:
识别原始词典中的字符、单词和短语之间的高频词的所述共同特征;和
根据所识别的高频词的共同特征的差异值,将原始词典中的字符、单词和短语划分为两个或更多个子词典。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于香港应用科技研究院有限公司,未经香港应用科技研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201680002011.0/1.html,转载请声明来源钻瓜专利网。