[发明专利]用于验证判断结果准确性的方法、装置、电子设备及介质

权利要求书

1.一种用于验证判断结果准确性的方法，包括：

获取用户描述信息和与所述用户描述信息对应的判断结果；

从所述用户描述信息中提取出至少一个描述要素；

利用预设的验证模型分别确定每一个所述描述要素与所述判断结果之间的匹配程度，得到各实际匹配值；其中，所述验证模型基于描述要素与判断结果之间的词频与逆文本频率指数TF-IDF关系训练得到；

将所述实际匹配值超过预设匹配值的描述要素确定为第一要素，并基于所述第一要素的数量确定所述判断结果的准确性。

2.根据权利要求1所述的方法，还包括：

利用预设的知识图谱确定与所述判断结果相关的多个知识要素；

将与任意所述知识要素一致的描述要素确定为第二要素；以及

所述基于所述第一要素的数量确定所述判断结果的准确性，包括：

根据所述第一要素和所述第二要素的数量确定所述判断结果的准确性。

3.根据权利要求2所述的方法，其中，所述将与任意所述知识要素一致的描述要素确定为第二要素，包括：

获取每个所述知识要素的置信度；

分别计算得到每个所述描述要素与每个所述知识要素之间的相似度；

根据所述相似度和所述置信度确定具有一致性的知识要素和描述要素，并将与任意所述知识要素具有一致性的描述要素确定为所述第二要素。

4.根据权利要求2所述的方法，其中，所述根据所述第一要素和所述第二要素的数量确定所述判断结果的准确性，包括：

对所述第一要素和所述第二要素进行去重处理，得到要素集合；

将所述要素集合中的要素数量与所述知识要素的总数的比值，作为所述判别结果的准确程度。

5.根据权利要求2所述的方法，还包括：

响应于存在与任意所述知识要素均不同的第一要素，将与任意所述知识要素均不同的第一要素作为补充要素添加进所述知识图谱。

6.根据权利要求2至5任一项所述的方法，其中，所述根据所述第一要素和所述第二要素的数量确定所述判断结果的准确性，包括：

获取预先分别为所述第一要素和所述第二要素设置的第一数量权重和第二数量权重；

将所述第一要素的数量和第一数量权重、所述第二要素的数量和第二数量权重，按照加权计算法计算得到加权后要素数量；

根据所述加权后要素数量确定所述判断结果的准确性。

7.一种用于验证判断结果准确性的装置，包括：

用户描述信息及判断结果获取单元，被配置成获取用户描述信息和与所述用户描述信息对应的判断结果；

描述要素提取单元，被配置成从所述用户描述信息中提取出至少一个描述要素；

匹配程度验证单元，被配置成利用预设的验证模型分别确定每一个所述描述要素与所述判断结果之间的匹配程度，得到各实际匹配值；其中，所述验证模型基于描述要素与判断结果之间的词频与逆文本频率指数TF-IDF关系训练得到；

第一要素及判断准确性确定单元，被配置成将所述实际匹配值超过预设匹配值的描述要素确定为第一要素，并基于所述第一要素的数量确定所述判断结果的准确性。

8.根据权利要求7所述的装置，还包括：

知识要素确定单元，被配置成利用预设的知识图谱确定与所述判断结果相关的多个知识要素；

第二要素确定单元，被配置成将与任意所述知识要素一致的描述要素确定为第二要素；以及

所述第一要素及判断准确性确定单元包括：

双要素判别结果准确性确定子单元，被配置成根据所述第一要素和所述第二要素的数量确定所述判断结果的准确性。

9.根据权利要求8所述的装置，其中，所述第二要素确定单元进一步被配置成：

获取每个所述知识要素的置信度；

分别计算得到每个所述描述要素与每个所述知识要素之间的相似度；

根据所述相似度和所述置信度确定具有一致性的知识要素和描述要素，并将与任意所述知识要素具有一致性的描述要素确定为所述第二要素。