[发明专利]交互系统评价方法、评价系统、服务器及计算机可读介质

权利要求书

1.一种交互系统评价方法，包括：

获取交互系统的交互日志，所述交互日志中记载有多个交互输入和所述交互系统根据所述交互输入识别出的第一意图；

针对至少部分交互输入中的每一个，根据该交互输入和与该交互输入相邻的至少一个交互输入，分析出该交互输入对应的第二意图；

针对至少部分交互输入中的每一个，将其对应的第二意图与所述交互系统识别出的第一意图进行比较；

根据全部比较结果生成第一评价结果。

2.根据权利要求1所述的交互系统评价方法，其中，所述交互输入包括音频信息，所述根据该交互输入和与该交互输入相邻的至少一个交互输入，分析出该交互输入对应的第二意图包括：

获取根据该交互输入转换出的第一文字信息，以及根据与该交互输入相邻的至少一个交互输入转换出的第二文字信息；

根据所述第一文字信息和所述第二文字信息，确定出该交互输入对应的第二意图。

3.根据权利要求1所述的交互系统评价方法，其中，所述根据该交互输入和与该交互输入相邻的至少一个交互输入，分析出该交互输入对应的第二意图包括：

至少根据与该交互输入相邻的至少一个交互输入，分析出该交互输入对应的话题领域；

根据该交互输入和所述话题领域对应的分析规则，分析出该交互输入对应的第二意图。

4.根据权利要求1所述的交互系统评价方法，其中，所述根据该交互输入和与该交互输入相邻的至少一个交互输入，分析出该交互输入对应的第二意图包括：

至少根据与该交互输入相邻的至少一个交互输入，分析出该交互输入对应的语言习惯属性；

根据该交互输入和所述语言习惯属性对应的分析规则，分析出该交互输入对应的第二意图。

5.根据权利要求1所述的交互系统评价方法，其中，所述针对至少部分交互输入中的每一个，将其对应的第二意图与所述交互系统识别出的第一意图进行比较包括：

根据所述第二意图和所述第一意图，计算出所述第二意图与所述第一意图的相似度；

根据所述相似度生成比较结果。

6.根据权利要求1所述的交互系统评价方法，其中，所述交互输入包括音频信息，所述交互日志中还记载有交互系统根据交互输入转换出的文字信息，所述方法还包括：

针对至少部分交互输入中的每一个，验证交互系统转换出的文字信息是否存在错误，并在验证出交互系统转换出的文字信息存在错误时，根据预设的错误分析模型分析出所述错误对应的错误类别；

根据预先设置的错误类别和评价值的对应关系，查找出错误类别对应的评价值；

根据错误类别对应的评价值生成第二评价结果。

7.根据权利要求1所述的交互系统评价方法，其中，所述交互日志中还记载有交互系统根据至少部分交互输入中的每一个产生的推荐内容，以及用户针对该推荐内容的反馈动作，所述方法还包括：

根据至少部分用户的反馈动作生成第三评价结果。

8.根据权利要求7所述交互系统评价方法，其中，所述推荐内容是交互系统根据设定的用户人物画像和交互输入产生的；所述根据至少部分用户的反馈动作生成第三评价结果包括：

根据至少部分用户的反馈动作，评价所述用户人物画像的准确度；

根据所述用户人物画像的准确度生成第三评价结果。

9.根据权利要求1所述的交互系统评价方法，其中，所述交互输入为音频信息，所述交互日志中还记载有交互系统根据交互输入识别出的第一语音识别结果，所述方法还包括：

针对至少部分交互输入中的每一个，根据GMM-HMM语音识别算法识别出该交互输入对应的第二语音识别结果；

针对至少部分交互输入中的每一个，将其对应的第二语音识别结果与第一语音识别结果进行比对；

根据全部比对结果生成第四评价结果。