[发明专利]分词方法和装置

说明书

技术领域

本发明涉及数据处理技术领域，尤其涉及一种分词方法和装置。

背景技术

在地图导航类的产品中，常常需要搜索信息点(PointOfInterest，POI)，在地理信息系统中，一个POI可以是一栋房子、一个商铺、一个邮筒、一个公交站等。由于用户输入的地名通常不是标准的POI，直接匹配数据库中的POI的方式难以获取用户需要的查询结果。为了获取用户需要的查询结果，通常会做后处理匹配，得到一个模糊近似的结果作为查询结果。在后处理匹配时需要对数据库中的POI进行分词，分词性能的好坏直接影响后处理匹配的结果。

现有的分词方法通常是用第三方的分词词典对POI进行分词，但是分词效果并不理想。

发明内容

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明的一个目的在于提出一种分词方法，该方法可以提高分词效果。

本发明的另一个目的在于提出一种分词装置。

为达到上述目的，本发明第一方面实施例提出的分词方法，包括：根据已有的词条建立初始的分词词典；获取第一词条集合，在所述第一词条集合中选择满足预设条件的词条，以及，获取分词词典，采用获取的分词词典对所述满足预设条件的词条进行分词，并用分词后的词条更新获取的分词词典，其中，初始的第一词条集合由已有的词条组成，以及，初始获取的分词词典是所述初始的分词词典；采用更新后的分词词典对所述第一词条集合中的词条进行分词，根据分词后的词条获取第二词条集合；在确定满足收敛条件时，根据所述第二词条集合获取分词结果。

本发明第一方面实施例提出的分词方法，通过已有的词条建立初始的分词词典，并根据对满足预设条件的词条进行分词后的词条更新分词词典，以及根据更新后的分词词典进行分词，可以根据已有的词条本身进行分词，相对于第三方词典的方式，可以提高词典的匹配度和准确度，从而提高分词效果。

为达到上述目的，本发明第二方面实施例提出的分词装置，包括：建立模块，用于根据已有的词条建立初始的分词词典；更新模块，用于获取第一词条集合，在所述第一词条集合中选择满足预设条件的词条，以及，获取分词词典，采用获取的分词词典对所述满足预设条件的词条进行分词，并用分词后的词条更新获取的分词词典，其中，初始的第一词条集合由已有的词条组成，以及，初始获取的分词词典是所述初始的分词词典；分词模块，用于采用更新后的分词词典对所述第一词条集合中的词条进行分词，根据分词后的词条获取第二词条集合；获取模块，用于在确定满足收敛条件时，根据所述第二词条集合获取分词结果。

本发明第二方面实施例提出的分词装置，通过已有的词条建立初始的分词词典，并根据对满足预设条件的词条进行分词后的词条更新分词词典，以及根据更新后的分词词典进行分词，可以根据已有的词条本身进行分词，相对于第三方词典的方式，可以提高词典的匹配度和准确度，从而提高分词效果。

本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1是本发明一实施例提出的分词方法的流程示意图；

图2是本发明另一实施例提出的分词方法的流程示意图；

图3是本发明另一实施例提出的分词装置的结构示意图；

图4是本发明另一实施例提出的分词装置的结构示意图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的模块或具有相同或类似功能的模块。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。相反，本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。

图1是本发明一实施例提出的分词方法的流程示意图，该方法包括：

S11：根据已有的词条建立初始的分词词典。

例如，由所有的已有的词条组成初始的分词词典，初始的分词词典中的每个词条是每个已有的词条。

S12：获取第一词条集合，在所述第一词条集合中选择满足预设条件的词条，以及，获取分词词典，采用获取的分词词典对所述满足预设条件的词条进行分词，并用分词后的词条更新获取的分词词典，其中，初始的第一词条集合由已有的词条组成，以及，初始获取的分词词典是所述初始的分词词典。