[发明专利]一种知识库测试方法及装置有效
申请号: | 202111433764.6 | 申请日: | 2021-11-29 |
公开(公告)号: | CN114020643B | 公开(公告)日: | 2023-01-20 |
发明(设计)人: | 申亚坤;赵辉;刘烨敏;谭莹坤;周慧婷;陶威 | 申请(专利权)人: | 中国银行股份有限公司 |
主分类号: | G06F11/36 | 分类号: | G06F11/36 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 钱湾湾 |
地址: | 100818 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 知识库 测试 方法 装置 | ||
本申请实施例公开了一种知识库测试方法及装置,可应用于人工智能领域或金融领域,针对知识库中所存储的大量知识,从该知识库中获取测试案例,即知识库中的知识。利用不同的关键词提取方式从测试案例中获取不同的关键词集合,从而获得多个关键词集合。其中,多个关键词集合中每个关键词集合对应一种关键词提取方式,每个关键词集合包括至少一个关键词。利用不同的关键词集合在知识库中进行搜索,获得不同关键词集合对应的搜索结果,即获得多个搜索结果。根据多个搜索结果以及目标结果确定测试结果。可见,本申请实施例通过不同的关键词提取方式来确定不同维度的关键词集合,从而利用不同的关键词集合进行搜索测试,提高测试的准确性。
技术领域
本申请涉及计算机技术领域,具体涉及一种知识库测试方法及装置。
背景技术
随着企业的不断发展,企业规模不断变大,知识量也在不断变大。目前企业的知识库测试方法很多,但测试精度参差不齐,使得搜索精度和搜索速度存在各种问题,导致上线后用户使用体验较差。
发明内容
有鉴于此,本申请实施例提供一种知识库测试方法及装置,以提高测试的准确性,提升工作效率。
为实现上述目的,本申请实施例提供的技术方案如下:
在本申请实施例第一方面,提供了一种知识库测试方法,所述方法包括:
从知识库中获取测试案例;
根据所述测试案例获取多个关键词集合,所述多个关键词集合中每个关键词集合对应一种关键词提取方式,所述每个关键词集合包括至少一个关键词;
利用所述多个关键词集合在所述知识库中进行搜索,获得多个搜索结果,所述多个关键词集合中每个关键词集合对应一个搜索结果;
根据所述多个搜索结果以及目标结果确定测试结果,所述目标结果为预先定义的搜索结果。
在一种具体的实现方式中,所述关键词提取方式包括以下至少一种或多种:全匹配提取方式、半匹配提取方式、无关匹配提取方式。
在一种具体的实现方式中,在所述关键词提取方式为全匹配提取方式时,所述根据所述测试案例获取多个关键词集合,包括:
获取所述测试案例的标题,将所述标题作为第一关键词集合。
在一种具体的实现方式中,在所述关键词提取方式为半匹配提取方式时,所述根据所述测试案例获取多个关键词集合,包括:
获取所述测试案例对应的分类标签,将所述分类标签作为第二关键词集合;和/或,
获取所述测试案例对应的标题;
对所述标题进行分词处理获得第三关键词集合。
在一种具体的实现方式中,在所述关键词提取方式为无关匹配提取方式时,所述根据所述测试案例获取多个关键词集合,包括:
获取与所述测试案例相关的关联案例;
将所述关联案例对应的关键词作为第四关键词集合。
在一种具体的实现方式中,在利用所述多个关键词集合在所述知识库中进行搜索之前,所述方法还包括:
从所述第四关键词集合中剔除包括在所述第三关键词集合的关键词。
在一种具体的实现方式中,所述根据所述多个搜索结果以及目标结果确定测试结果,包括:
将所述多个搜索结果中的每个搜索结果分别与目标结果进行比较,获取多个搜索精度;
将所述多个搜索精度进行加权平均获得测试精度。
在一种具体的实现方式中,所述从知识库中获取测试案例,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111433764.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:电动翻转踏板控制方法及控制装置
- 下一篇:一种妇产科用医疗床