[发明专利]服务验证方法及设备

说明书

本发明实施例提供一种服务验证方法及设备，该方法包括：根据生产环境的用户问题的数量，确定采集问题的总数；基于生产环境的置信度的分布，确定各置信度的采集比例；根据所述采集问题的总数和各置信度的采集比例，确定各置信度的问题采集数量；基于各置信度的问题采集数量，从生产环境的用户问题中获取各置信度的待测试数据；将所述待测试数据输入待验证客服机器人；获得所述待验证客服机器人对所述待测试数据的回复；根据所述回复，以及预设的所述待测试数据对应的回复，对所述待验证客服机器人的服务进行验证，即在智能客服机器人的版本上线之前实现服务验证，能够及时发现客服机器人的问题，避免了版本上线之后进行服务验证带来的影响。

技术领域

本发明实施例涉及信息处理技术领域，尤其涉及一种服务验证方法及设备。

背景技术

随着社会经济的发展，人们生活水平不断提高，网络购物进入了人们的日常生活。在网络购物中，客户较多时，人工客服难以为客户提供及时、高质量的解答，需要智能客服机器人提供服务。智能客服机器人的服务效率和服务质量影响着客户的体验。

通常智能客服机器人的服务情况是在智能客服机器人的版本上线之后，根据客服人员对答案的操作和回复内容来判断。例如，根据客户问题和智能客服机器人回复答案的匹配程度来判断智能客服机器人的服务质量。

然而，上述判断智能客服机器人服务情况的方法是在智能客服机器人的版本上线之后进行的，属于事后判断。如果需要对智能客服机器人进行调整，可能会导致客服服务质量下降，影响客户体验，进而影响业务正常进行。

发明内容

本发明实施例提供一种服务验证方法及设备，以解决现有的判断智能客服机器人服务情况的方法导致的客服服务质量下降，影响客户体验，进而影响业务正常进行的问题。

第一方面，本发明实施例提供一种服务验证方法，包括：

根据生产环境的用户问题的数量，确定采集问题的总数；

基于生产环境的置信度的分布，确定各置信度的采集比例；

根据所述采集问题的总数和各置信度的采集比例，确定各置信度的问题采集数量；

基于各置信度的问题采集数量，从生产环境的用户问题中获取各置信度的待测试数据；

将所述待测试数据输入待验证客服机器人；

获得所述待验证客服机器人对所述待测试数据的回复；

根据所述回复，以及预设的所述待测试数据对应的回复，对所述待验证客服机器人的服务进行验证。

可选地，还包括：

基于生产环境的问题类型的分布，确定各问题类型的采集比例；

根据所述采集问题的总数和各问题类型的采集比例，确定各问题类型的采集数量；

所述基于各置信度的问题采集数量，从生产环境的用户问题中获取各置信度的待测试数据，包括：

基于各置信度的问题采集数量和各问题类型的采集数量，从生产环境的用户问题中获取待测试数据。

可选地，所述根据所述回复，以及预设的所述待测试数据对应的回复，对所述待验证客服机器人的服务进行验证，包括：

判断所述回复与预设的所述待测试数据对应的回复是否一致；

若所述回复与预设的所述待测试数据对应的回复一致，则判定所述待验证客服机器人的服务验证通过。

可选地，在所述获取待测试数据之后，还包括：

根据预设的用户问题与客服机器人的对应关系，确定所述待测试数据对应的待验证客服机器人。