[发明专利]一种联合识别和连接命名实体的方法及装置

说明书

本发明实施例公开了一种联合识别和连接命名实体的方法及装置。联合识别和连接命名实体的方法，包括：对输入文本的分词标注词性，生成分词文本；连接所述分词文本和至少一个预设实体库；根据连接结果生成的至少一个备选答案组合，确定命名实体识别和连接的结果。本发明实施例提出联合识别和连接命名实体的方法，该方法考虑了命名实体识别和实体连接间的依赖关系，缓解了错误传播问题，从而可以提高命名实体识别和实体连接的精度。

技术领域

本发明实施例涉及自然语言处理技术，尤其涉及一种联合识别和连接命名实体的方法及装置。

背景技术

基于自然语言的人机自动应答系统，是自然语言理解的一个重要应用。人机自动应答系统在针对某一领域知识库进行特殊处理之后，用户以自然语言形式提出问题，系统能够以多媒体的形式自动给出答案。

命名实体识别和实体连接是自然语言理解的一个重要组成部分，在实际应用中，现有技术先进行命名实体识别(Named Entity Recognition)，然后进行实体连接(EntityLinking)。

但是，采用先进行命名实体识别，然后进行实体连接的方式，存在错误传播的风险，即第一步识别错的命名实体或者没有识别出的命名实体均不能在第二步被正确的连接到实体库中。

发明内容

本发明提供一种联合识别和连接命名实体的方法及装置，以实现同步处理命名实体识别和实体连接，缓解错误传播问题，从而提高命名实体识别和连接的精度。

第一方面，本发明实施例提供了一种联合识别和连接命名实体的方法，包括：

对输入文本的分词标注词性，生成分词文本；

连接所述分词文本和至少一个预设实体库；

根据连接结果生成的至少一个备选答案组合，确定命名实体识别和连接的结果。

进一步地，根据连接结果生成的至少一个备选答案组合，确定命名实体识别和连接的结果包括：

当所述分词为第一级分词，则根据第一级分词和所述预设实体库中预设命名实体的匹配结果，生成第一级分词的分词答案组合；

当所述分词非第一级分词，则根据所述分词文本中本级分词和所述至少一个预设实体库中预设命名实体的匹配结果以及上一级分词的筛选分词答案组合，生成本级分词的分词答案组合；

根据所述本级分词答案组合的评分，得到命名实体识别和连接的结果。

进一步地，根据所述本级分词答案组合的评分，得到命名实体识别和连接的结果包括：

将最后一级分词的分词答案组合中评分最高的分词答案组合确定为命名实体识别和连接的结果。

进一步地，对所述分词答案组合评分包括：

抽取所述分词答案组合的特征，生成相应的答案特征集合；

根据所述答案特征集合和预设模型参数，确定所述分词答案组合的评分。

进一步地，抽取所述分词答案组合的特征，生成相应的答案特征集合包括：

抽取所述分词答案组合中各级分词的特征，并组成特征向量，作为所述分词答案组合的答案特征集合；

所述根据所述答案特征集合和预设模型参数，确定所述分词答案组合的评分包括：

根据所述预设模型参数，确定所述特征向量对应的权重向量；

计算所述权重向量的转置向量和所述特征向量的数量积，并将所述数量积作为所述分词答案组合的评分。

第二方面，本发明实施例还提供了一种联合识别和连接命名实体的装置，包括：