[发明专利]一种知识库测试方法及装置

权利要求书

1.一种知识库测试方法，其特征在于，所述方法包括：

从知识库中获取测试案例，所述测试案例是指所述知识库中所包括的知识；

根据预先定义的关键词提取方式从所述测试案例获取多个关键词集合，所述多个关键词集合中每个关键词集合对应一种关键词提取方式，所述每个关键词集合包括至少一个关键词，所述预先定义的关键词提取方式是指从不同的角度从所述测试案例中提取关键词；

利用所述多个关键词集合在所述知识库中进行搜索，获得多个搜索结果，所述多个关键词集合中每个关键词集合对应一个搜索结果；

根据所述多个搜索结果以及目标结果确定测试结果，所述目标结果为预先定义的搜索结果。

2.根据权利要求1所述的方法，其特征在于，所述关键词提取方式包括以下至少一种或多种：全匹配提取方式、半匹配提取方式、无关匹配提取方式。

3.根据权利要求2所述的方法，其特征在于，在所述关键词提取方式为全匹配提取方式时，所述根据预先定义的关键词提取方式从所述测试案例获取多个关键词集合，包括：

获取所述测试案例的标题，将所述标题作为第一关键词集合。

4.根据权利要求2所述的方法，其特征在于，在所述关键词提取方式为半匹配提取方式时，所述根据预先定义的关键词提取方式从所述测试案例获取多个关键词集合，包括：

获取所述测试案例对应的分类标签，将所述分类标签作为第二关键词集合；和/或，

获取所述测试案例对应的标题；

对所述标题进行分词处理获得第三关键词集合。

5.根据权利要求2所述的方法，其特征在于，在所述关键词提取方式为无关匹配提取方式时，所述根据预先定义的关键词提取方式从所述测试案例获取多个关键词集合，包括：

获取与所述测试案例相关的关联案例；

将所述关联案例对应的关键词作为第四关键词集合。

6.根据权利要求2所述的方法，其特征在于，在所述关键词提取方式包括半匹配提取方式和无关匹配提取方式时，所述根据预先定义的关键词提取方式从测试案例获取多个关键词集合，包括：

在所述关键词提取方式为所述半匹配提取方式时，获取所述测试案例对应的标题，并对所述标题进行分词处理获得第三关键词集合；

在所述关键词提取方式为所述无关匹配提取方式时，获取与所述测试案例相关的关联案例，将所述关联案例对应的关键词作为第四关键词集合；

从所述第四关键词集合中剔除包括在所述第三关键词集合的关键词。

7.根据权利要求1所述的方法，其特征在于，所述根据所述多个搜索结果以及目标结果确定测试结果，包括：

将所述多个搜索结果中的每个搜索结果分别与目标结果进行比较，获取多个搜索精度；

将所述多个搜索精度进行加权平均获得测试精度。

8.根据权利要求1-7任一项所述的方法，其特征在于，所述从知识库中获取测试案例，包括：

针对所述知识库中的任一类型知识，将该类型知识中使用频率大于预设阈值的知识确定为所述类型知识所对应的测试案例。

9.根据权利要求8所述的方法，其特征在于，所述知识库至少包括：坐席知识、公共信息知识和机器人知识。

10.一种知识库测试装置，其特征在于，所述装置包括：

第一获取单元，用于从知识库中获取测试案例，所述测试案例是指所述知识库中所包括的知识；

第二获取单元，用于根据预先定义的关键词提取方式从所述测试案例获取多个关键词集合，所述关键词集合中每个关键词集合对应一种关键词提取方式，所述关键词集合包括至少一个关键词，所述预先定义的关键词提取方式是指从不同的角度从所述测试案例中提取关键词；

搜索单元，用于利用所述多个关键词集合在所述知识库中进行搜索，获得多个搜索结果，所述关键词集合中每个关键词集合对应一个搜索结果；

确定单元，用于根据所述多个搜索结果以及目标结果确定测试结果，所述目标结果为预先定义的搜索结果。