[发明专利]数据模型的效果评估方法、系统、电子装置和存储介质

说明书

本申请涉及一种数据模型的效果评估方法、系统、电子装置和存储介质，其中，该方法包括：根据预设时间参数，从旧数据模型服务端中获取测试用例集；从旧数据模型中获取与测试用例集关联的第一计算结果；将测试用例集输入到新数据模型中进行执行，得到第二计算结果；将第一计算结果和第二计算结果进行比对评估，生成评估结果。通过本申请，解决了相关技术中存在需要人工参与评估过程，导致评估效率低，准确率不高的问题，实现了新数据模型与旧数据模型的自动对比效果评估，避免人为因数介入，而且使用时间参数从旧数据模型服务端中筛选的测试用例集，能够保证测试用例的广泛性、随机性以及及时性；从而能够提高准确率及评估效率。

技术领域

本申请涉及数据模型效果评估技术领域，特别是涉及数据模型的效果评估方法、系统、电子装置和存储介质。

背景技术

随着精细化运营的理念不断深入人心，越来越多的企业开始重视数据的价值，并且希望搭建出一套自己企业的业务计算的数据模型，以便更好地指导决策。目前在多种应用领域中，都已经广泛使用建模来实现各种智能化处理功能。同时，为了避免随着时间的推移导致模型的适用性下降或者随着业务场景的增加或者变化，均需要不断迭代更新。而对新旧模型进行效果评估是新旧模型迭代更新的先决条件。

目前，对新旧模型进行效果评估方式是需要人为准备大量的测试用例，手动执行测试脚本，根据既定的量化指标，评估新模型的效果是否优于旧模型。并且，针对新旧模型计算结果不一致的用例，需要逐条对比中间计算结果差异，需要人工确认查找差异原因以确认新模型的效果是否优于旧模型。

目前针对相关技术中，存在需要人工参与评估过程，导致评估效率低，准确率不高，尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种数据模型的效果评估方法、系统、电子装置和存储介质，以至少解决相关技术中存在需要人工参与评估过程，导致评估效率低，准确率不高的问题。

第一方面，本申请实施例提供了一种数据模型的效果评估方法，包括：

根据预设时间参数，从旧数据模型服务端中获取测试用例集；

从旧数据模型中获取与所述测试用例集关联的第一计算结果；

将所述测试用例集输入到新数据模型中进行执行，得到第二计算结果；

将所述第一计算结果和第二计算结果进行比对评估，生成评估结果。

在其中一些实施例中，所述根据预设时间参数，从旧数据模型服务端中获取测试用例集，包括：

根据所述预设时间参数，生成日期批次数据集；

根据所述日期批次数据集，对所述旧数据模型服务端进行数据筛选，得到对应的测试用例集。

在其中一些实施例中，所述从旧数据模型中获取与所述测试用例集关联的第一计算结果，包括：

基于所述测试用例集，从与旧数据模型对应的第一结果数据库表中存储的执行结果进行匹配，得到第一计算结果；

或，将所述测试用例集输入到所述旧数据模型中进行执行，得到第一计算结果。

在其中一些实施例中，其特征在于，所述将所述测试用例集输入到新数据模型中进行执行，得到第二计算结果，包括：

将所述测试用例集输入到多个相同逻辑的所述新数据模型中进行执行，得到第二计算结果，并将所述第二计算结果存储于每个新数据模型对应的第二结果数据库表中。

在其中一些实施例中，所述将所述第一计算结果和第二计算结果进行比对评估，生成评估结果，包括：

将所述第一计算结果和第二计算结果进行比对，判断所述第一计算结果和第二计算结果是否一致；