[发明专利]用于评测会话机器人智能的方法及设备

说明书

本发明的实施方式提供了一种用于评测会话机器人智能的方法。该用于评测会话机器人智能的方法包括：根据会话机器人的配置信息确定配置指标的配置质量；其中，上述配置指标包括：表达配置信息的表达方式、意图配置信息的意图设置、表达配置信息的实体标注及表达配置信息的服务触发中的至少一个。本发明的实施方式通过设置衡量会话机器人的智能程度的配置指标，使本发明可以基于会话机器人的配置信息客观的认知会话机器人的智能水平，从而有利于提升会话机器人的智能水平。此外，本发明的实施方式还提供了一种用于评测会话机器人智能的设备以及计算机可读存储介质。

技术领域

本发明的实施方式涉及机器人领域，更具体地，本发明的实施方式涉及用于评测会话机器人智能的方法、用于评测会话机器人智能的设备以及计算机可读存储介质。

背景技术

本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或者上下文。此处的描述不因为包括在本部分中就承认是现有技术。

会话机器人可以通过识别用户的意图而为用户提供相应的服务，如会话机器人根据用户的意图为用户提供音乐播放服务以及问题解答服务等。

目前，已经出现了会话机器人开发平台，会话机器人开发者可以通过在会话机器人开发平台上进行相应的信息配置从而方便快捷的生成会话机器人；利用会话机器人开发平台所生成的会话机器人的智能水平在很大程度上依赖于会话机器人开发者的技能，如何对会话机器人的智能水平进行客观的认知，以便于提升会话机器人的智能水平，是一个值得关注的技术问题。

发明内容

但是，出于目前会话机器人的开发过程与开发者的开发习惯以及主观认知等相关，且现有技术并未存在一种对会话机器人的智能水平进行客观评测的技术方案等原因，使会话机器人的智能水平依赖于开发者的开发水平，从而使不同的会话机器人的智能水平存在较大差异。

因此在现有技术中，会话机器人的智能水平无法被客观的认知，且这种状况不利于提升会话机器人的智能水平，这是非常令人烦恼的过程。

为此，非常需要一种现实且便捷可行的用于评测会话机器人智能的技术方案，以使会话机器人的智能水平能够被会话机器人的开发者等相关人员客观认知，以对会话机器人的智能水平进行相应的提升。

在本上下文中，本发明的实施方式期望提供一种用于评测会话机器人智能的方法、设备以及计算机可读存储介质。

在本发明实施方式的第一方面中，提供了一种用于评测会话机器人智能的方法，该方法包括：根据会话机器人的配置信息确定配置指标的配置质量；其中，所述配置指标包括：表达配置信息的表达方式、意图配置信息的意图设置、表达配置信息的实体标注、表达配置信息的服务触发中的至少一个。

在本发明的一个实施例中，该根据会话机器人的配置信息确定配置指标的配置质量的步骤包括：根据会话机器人的配置信息中对应同一意图的不同表达之间的差异度确定会话机器人的表达配置信息的表达方式的配置质量；和/或，根据会话机器人的配置信息中包含有无关表达词集合中的无关表达词的表达确定会话机器人的表达配置信息的表达方式的配置质量；和/或，根据会话机器人的配置信息中的各表达长度确定会话机器人的表达配置信息的表达方式的配置质量。

在本发明的另一实施例中，该根据会话机器人的配置信息确定配置指标的配置质量的步骤包括：根据会话机器人的配置信息中的意图与其对应的表达之间的相似度确定会话机器人的意图配置信息的意图设置的配置质量；和/或，根据会话机器人的配置信息中的对应不同意图的表达之间的相似度确定会话机器人的意图配置信息的意图设置的配置质量。

在本发明的又一个实施例中，该根据会话机器人的配置信息确定配置指标的配置质量的步骤包括：根据会话机器人的配置信息中的表达实体标注的正确程度确定会话机器人的表达配置信息的实体标注的配置质量；和/或，根据会话机器人的配置信息中的表达实体标注的数量确定会话机器人的表达配置信息的实体标注的配置质量。