[发明专利]诊断和优化数据分析系统的方法、设备和介质

说明书

本公开的实施例涉及用于诊断和优化数据分析模型的方法、设备和计算机存储介质。该诊断方法包括：获取关于待诊断的数据分析系统中的分析引擎的信息和与分析引擎相关联的待诊断数据；基于接收的信息，确定与分析引擎相对应的诊断引擎；以及通过利用诊断引擎处理待诊断数据，提供与分析引擎和待诊断数据中的至少一项相关联的不确定性度量。基于这样的方法，可以利用与分析引擎相对应的诊断引擎来确定模型或者待诊断的数据对数据分析系统的分析引擎进行预测的准确度所带来的影响，进而为用户选择适合的数据分析模型或者确定待诊断数据可能存在的缺陷提供支持。

技术领域

本公开的实施例涉及人工智能领域，并且更具体地，涉及用于诊断和优化数据分析系统的方法、设备和计算机存储介质。

背景技术

随着计算机技术的不断发展，数据分析系统已经被广泛地应用于人们生活的各个方面，诸如深度神经网络等分析引擎越来越多地被用于图像识别、语音识别和目标检测等各种类型的任务中。通常，需要利用训练数据来对分析引擎进行训练，但是分析引擎在预测过程中往往无法达到训练阶段的性能。可能存在导致分析引擎在预测阶段性能下降的多种原因，开发人员往往难以发现分析引擎所存在的缺陷，并进行针对性的改进，这是不希望的。

发明内容

本公开的实施例提供一种用于诊断和优化数据分析系统的方案。

根据本公开的第一方面，提出了一种用于诊断数据分析系统的方法。该方法包括：获取关于待诊断的数据分析系统中的分析引擎的信息和与分析引擎相关联的待诊断数据，待诊断数据包括用于分析引擎的训练数据和预测数据中的至少一项；基于接收的信息，确定与分析引擎相对应的诊断引擎；以及通过利用诊断引擎处理待诊断数据，提供与分析引擎和待诊断数据中的至少一项相关联的不确定性度量，不确定性度量指示分析引擎针对处理待诊断数据获得的预测结果的确定程度。

根据本公开的第二方面，提出了一种用于优化数据分析系统的方法。该方法包括：向诊断系统提供关于数据分析系统中的分析引擎的信息和与分析引擎相关联的待诊断数据，待诊断数据包括用于分析引擎的训练数据和预测数据中的至少一项；从诊断系统接收与分析引擎和待诊断数据中的至少一项相关联的不确定性度量，不确定性度量指示分析引擎针对处理待诊断数据获得的预测结果的确定程度；以及基于不确定性度量更新分析引擎。

根据本公开的第三方面，提出了一种用于诊断数据分析系统的设备。该设备包括：至少一个处理单元；至少一个存储器，该至少一个存储器被耦合到该至少一个处理单元并且存储用于由该至少一个处理单元执行的指令，该指令当由该至少一个处理单元执行时，使得该设备执行动作，该动作包括：获取关于待诊断的数据分析系统中的分析引擎的信息和与分析引擎相关联的待诊断数据，待诊断数据包括用于分析引擎的训练数据和预测数据中的至少一项；基于接收的信息，确定与分析引擎相对应的诊断引擎；以及通过利用诊断引擎处理待诊断数据，提供与分析引擎和待诊断数据中的至少一项相关联的不确定性度量，不确定性度量指示分析引擎针对处理待诊断数据获得的预测结果的确定程度。

根据本公开的第四方面，提出了一种用于优化模型分析系统的设备。该设备包括：至少一个处理单元；至少一个存储器，该至少一个存储器被耦合到该至少一个处理单元并且存储用于由该至少一个处理单元执行的指令，该指令当由该至少一个处理单元执行时，使得该设备执行动作，该动作包括：向提供系统发送关于数据分析系统中的分析引擎的信息和与分析引擎相关联的待诊断数据，待诊断数据包括用于分析引擎的训练数据和预测数据中的至少一项；从诊断系统接收与分析引擎和待诊断数据中的至少一项相关联的不确定性度量，不确定性度量指示分析引擎针对处理待诊断数据获得的预测结果的确定程度；以及基于不确定性度量更新分析引擎。

在本公开的第五方面，提供了一种计算机可读存储介质。该计算机可读存储介质具有存储在其上的计算机可读程序指令，该计算机可读程序指令用于执行根据第一方面所描述的方法。

在本公开的第六方面，提供了一种计算机可读存储介质。该计算机可读存储介质具有存储在其上的计算机可读程序指令，该计算机可读程序指令用于执行根据第二方面所描述的方法。