[发明专利]一种数据校验方法及装置

权利要求书

1.一种数据校验方法，其特征在于，包括：

从数据库中提取目标数据；

为所述目标数据配置多个校验规则；

利用spark内存计算引擎，根据所述多个校验规则对所述目标数据进行校验，得到校验结果。

2.根据权利要求1所述的方法，其特征在于，为所述目标数据配置多个校验规则包括：

从ES服务器中获取所述目标数据的属性对应的校验规则，通过excel模板对所述属性对应的校验规则的规则参数进行调整，以生成所述目标数据的所述多个校验规则；

通过客户端页面为所述目标数据选取多个属性对应的多个规则模板，通过所述多个规则模板为所述目标数据配置所述多个校验规则，其中，一个属性对应一个规则模板。

3.根据权利要求2所述的方法，其特征在于，通过excel模板对所述属性对应的校验规则的规则参数进行调整，以生成所述目标数据的所述多个校验规则包括：

在所述excel模板中获取通过触控操作输入的调整所述属性对应的校验规则的规则参数的调整指令；

根据所述调整指令调整所述属性对应的校验规则的规则参数；

根据所述属性对应的校验规则与对应的调整后的规则参数生成所述目标数据的所述多个校验规则。

4.根据权利要求2所述的方法，其特征在于，通过所述多个规则模板为所述目标数据配置所述多个校验规则包括：

分别在所述多个规则模板的每个规则模板中获取通过触控操作输入的规则参数；

基于所述多个规则模板与对应的所述规则参数为所述目标数据生成所述多个校验规则。

5.根据权利要求2所述的方法，其特征在于，在所述为目标数据配置多个校验规则之后，所述方法还包括：

将所述目标数据与所述多个校验规则进行关联；

将关联后的所述目标数据与所述多个校验规则上传到所述ES服务器中。

6.根据权利要求1所述的方法，其特征在于，利用spark内存计算引擎，根据所述多个校验规则对所述目标数据进行校验，得到校验结果包括：

在所述spark内存计算引擎中，为所述多个校验规则中的每个校验规则触发单个spark内存计算模块，分别基于所述spark内存计算模块对所述多个校验规则进行校验；

在校验完成之后释放spark内存计算模块的计算资源。

7.根据权利要求6所述的方法，其特征在于，在所述spark内存计算引擎中，为所述多个校验规则中的每个校验规则触发单个spark内存计算模块之前，所述方法还包括：

获取所述spark内存计算引擎的计算总资源；

根据所述计算总资源为所述多个校验规则分配所述spark内存计算模块，并为所述多个校验规则设置校验序号，其中，所述校验序号用于指示校验的顺序。

8.根据权利要求1至7中任一项所述的方法，其特征在于，在利用spark内存计算引擎，根据所述多个校验规则对所述目标数据进行校验，得到校验结果之后，所述方法还包括：

将所述多个校验规则与对应的所述校验结果加载到ES数据库中，以提供所述目标数据的校验结果的明细查询，其中，所述校验结果包括校验的汇总数据与未通过校验的明细数据。

9.一种数据校验装置，其特征在于，包括：

提取模块，用于从数据库中提取目标数据；

配置模块，用于为所述目标数据配置多个校验规则；

校验模块，用于利用spark内存计算引擎，根据所述多个校验规则对所述目标数据进行校验，得到校验结果。

10.一种计算机可读的存储介质，其特征在于，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行所述权利要求1至8任一项中所述的方法。

11.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行所述权利要求1至8中任一项所述的方法。