[发明专利]分析结果的评估方法及终端

说明书

本发明公开了一种分析结果的评估方法及终端，获取预设数量的文件作为测试集；获取第一设备对所述测试集的第一标记结果及AI模型对所述测试集的第二标记结果；获取金标准，对所述第一标记结果与所述金标准之间的第一差值及所述第二标记结果与所述金标准之间的第二差值进行t检验，得到第一检验结果；判断所述第一检验结果是否大于阈值，若是，则认为所述第二标记结果具有准确性；本发明所公开的内容通过获取第一设备及AI模型针对同一测试集的第一标记及第二标记，并获取所述测试集的金标准，计算所述第一标记与金标准的差值及第二金标准的差值及对差值进行t检验，得到AI模型与第一设备相比的准确性，实现准确性评估。

技术领域

本发明涉及统计方法领域，尤其涉及一种分析结果的评估方法及终端。

背景技术

现有的对AI的分析结果的准确性评估方法主要是通过计算AI的分析结果与金标准之间的差值，进行差值运算，但此种判断方式无法看出空间上的分布趋势，如在一些场景中，AI测量的结果更加倾向在水平方向上呈现差异，而在垂直位置上差异很小，这种空间上的分布，对于进一步改进方法有重要的提示意义，但现有方法无法体现，所以需要设计一种与人工方法相比较的准确性评价。

发明内容

本发明所要解决的技术问题是：提供一种分析结果的评估方法及终端，实现对AI分析结果的准确评估。

为了解决上述技术问题，本发明采用的一种技术方案为：

一种分析结果的评估方法，包括步骤：

S1、获取预设数量的文件作为测试集；

S2、获取第一设备对所述测试集的第一标记结果及AI模型对所述测试集的第二标记结果；

S3、获取金标准，对所述第一标记结果与所述金标准之间的第一差值及所述第二标记结果与所述金标准之间的第二差值进行t检验，得到第一检验结果；

S4、判断所述第一检验结果是否大于阈值，若是，则认为所述第二标记结果具有准确性。

为了解决上述技术问题，本发明采用的另一种技术方案为：

一种分析结果的评估终端，包括存储器、处理器及存储在存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

S1、获取预设数量的文件作为测试集；

S2、获取第一设备对所述测试集的第一标记结果及AI模型对所述测试集的第二标记结果；

S3、获取金标准，对所述第一标记结果与所述金标准之间的第一差值及所述第二标记结果与所述金标准之间的第二差值进行t检验，得到第一检验结果；

S4、判断所述第一检验结果是否大于阈值，若是，则认为所述第二标记结果具有准确性。

本发明的有益效果在于：通过设置第一设备与AI模型共同对同一测试集进行标记，并将标记结果与金标准相比较计算差值，对所述差值进行t检验，计算出不同标记结果与金标准的差值，直观获得不同标记方式与金标准之间差值的对比结果，对所述差值进行t检验能够将准确性的标准量化，根据t检验的结果能够直接判断AI模型的标记结果是否具有准确性，实现对AI分析结果的准确性评估。

附图说明

图1为本发明实施例的一种分析结果的评估方法的步骤流程图；

图2为本发明实施例的一种分析结果的评估终端的结构示意图；

图3为本发明实施例的一种散点图；

标号说明：

1、一种分析结果的评估终端；2、处理器；3、存储器；

具体实施方式