[发明专利]一种数据计算流程中的数据核对方法、系统及存储介质

权利要求书

1.一种数据计算流程中的数据核对方法，其特征在于，包括以下步骤：

获取指定层级的数仓数据；

从数仓数据中识别出若干重要表，

分别对每个重要表所对应的表属性和/或字段属性进行检验以确定出存在异常波动的重要表，

基于预设的字段属性、表属性与异常级别之间的对应关系，确定每个存在异常波动的重要表的异常级别；

根据每个异常级别以及对应的重要表分别生成异常通知并发送；

判断所有异常级别的权重是否均低于预设权重，

若是，则执行当前指定层级的数据运算；

若不是，则暂停当前指定层级的数据运算。

2.根据权利要求1所述的一种数据计算流程中的数据核对方法，其特征在于，所述字段属性包括非空字段，所述分别对每个重要表所对应的表属性和/或字段属性进行检验以确定出存在异常波动的重要表，包括以下步骤：

获取重要表中的非空字段，并分别判断每个非空字段是否为空值，任意一个非空字段为空值，则确定对应的重要表存在异常波动。

3.根据权利要求1所述的一种数据计算流程中的数据核对方法，其特征在于，所述表属性包括可空字段，所述分别对每个重要表所对应的表属性和/或字段属性进行检验以确定出存在异常波动的重要表，包括以下步骤：

获取重要表中的可空字段，计算每类可空字段的当前空值率，并从预设数据库中匹配出可空字段所对应的历史空值率；

根据历史空值率和预设的允许波动值确定阈值；

判断当前空值率是否超过对应的阈值，

若是，则确定对应的重要表存在异常波动。

4.根据权利要求3所述的一种数据计算流程中的数据核对方法，其特征在于，所述分别对每个重要表所对应的表属性和/或字段属性进行检验以确定出存在异常波动的重要表，还包括以下步骤：若当前空值率低于或等于对应的阈值，则将当前空值率作为历史空值率并更新到数据库中。

5.根据权利要求1所述的一种数据计算流程中的数据核对方法，其特征在于，所述表属性包括枚举校验字段，所述分别对每个重要表所对应的表属性和/或字段属性进行检验以确定出存在异常波动的重要表，包括以下步骤：

获取重要表的枚举校验字段，判断枚举校验字段的内容是否均可从预设集合中匹配到对应的预设值，

若不是，则确认对应的重要表存在异常波动。

6.根据权利要求1所述的一种数据计算流程中的数据核对方法，其特征在于，所述表属性包括数据发散，所述分别对每个重要表所对应的表属性和/或字段属性进行检验以确定出存在异常波动的重要表，包括以下步骤：

识别重要表中的主键，并判断重要表中的主键是否存在重复，

若重复，则定义对应的重要表的表属性具有数据发散，并确定对应的重要表存在异常波动。

7.根据权利要求6所述的一种数据计算流程中的数据核对方法，其特征在于，所述识别重要表中的主键，并判断重要表中的主键是否存在重复之前，还包括以下步骤：

判断所对应的重要表是否具有代表许可重复的标识，

若是，则不执行识别重要表中的主键的步骤；

若不是，则执行识别重要表中的主键的步骤。

8.根据权利要求1所述的一种数据计算流程中的数据核对方法，其特征在于，所述获取指定层级的数仓数据包括以下步骤：

获取预存储的基数，其中，不同的基数对应不同的数仓层级；

根据基数确定数仓层级并将其作为指定层级，获取指定层级的数仓数据；

所述执行当前指定层级的数据运算之后还包括：以预设的更新规则更新基数。