[发明专利]客服机器人的评测方法、装置、计算机设备及存储介质有效
| 申请号： | 201910843141.2 | 申请日： | 2019-09-06 |
| 公开（公告）号： | CN110737759B | 公开（公告）日： | 2023-07-25 |
| 发明（设计）人： | 彭晶 | 申请（专利权）人： | 中国平安人寿保险股份有限公司 |
| 主分类号： | G06F16/332 | 分类号： | G06F16/332;G06F16/33;G06F16/35;G06Q10/0639;G06Q30/015 |
| 代理公司： | 深圳众鼎专利商标代理事务所(普通合伙) 44325 | 代理人： | 詹建新 |
| 地址： | 518000 广东省深圳市福田*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了客服机器人的评测方法、装置、计算机设备及存储介质，应用于客服机器人技术领域，用于解决客服机器人评测结果准确率低的问题。本发明提供的方法包括：获取验证语料集中的用户问句；调用客服机器人接口提交用户问句；解析接口返回的数据包，提取对应的客服答案；将用户问句输入预设的FAQ模型，得到答案阈值；根据答案阈值将客服答案确定为第一类答案、第二类答案和第三类答案；将每类答案与对应的预期答案相比，得到匹配度；统计第一类答案匹配度大于预设第一阈值的数量、第二类答案匹配度大于预设第二阈值的数量、第三类答案匹配度大于预设第三阈值的数量，得到每类答案各自对应的准确率；根据各个准确率及各自权重计算得到总评分值。 | ||
| 搜索关键词： | 客服 机器人 评测 方法 装置 计算机 设备 存储 介质 | ||
【主权项】：
1.一种客服机器人的评测方法，其特征在于，包括：/n获取验证语料集中的用户问句，所述验证语料集中每一条记录包括一条预先采集的用户问句及所述用户问句对应的预期答案；/n调用客服机器人接口，将所述验证语料集中的用户问句提交至客服机器人；/n解析所述客服机器人接口返回的数据包，从所述数据包中提取得到所述用户问句对应的客服答案；/n将所述用户问句输入预设的FAQ模型，得到答案阈值；/n将所述答案阈值在预设第一区间的用户问句对应的客服答案、所述答案阈值在预设第二区间的用户问句对应的客服答案以及所述答案阈值在预设第三区间的用户问句对应的客服答案分别确定为第一类答案、第二类答案和第三类答案；/n将所述第一类答案、第二类答案和第三类答案分别与所述用户问句各自对应的预期答案进行一一比对，得到所述用户问句各自对应的匹配度；/n分别统计第一类答案的匹配度大于预设第一阈值的数量、第二类答案的匹配度大于预设第二阈值的数量、第三类答案的匹配度大于预设第三阈值的数量和用户问句总数量；/n根据统计得到的数量分别计算得到第一类答案、第二类答案和第三类答案各自对应的第一准确率、第二准确率和第三准确率；/n根据所述第一准确率、所述第二准确率、所述第三准确率以及各自对应的权重计算得到客服机器人准确率的总评分值。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司，未经中国平安人寿保险股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910843141.2/，转载请声明来源钻瓜专利网。
- 上一篇：用于生成模型的方法和装置
- 下一篇：诉讼案件处理方法、装置、设备及存储介质
