[发明专利]数据质量检测方法、装置及设备

权利要求书

1.一种数据质量检测方法，其特征在于，包括：

确定多个数据表的多个目标字段；

生成各数据表的数据探查指令；

并行执行多个数据表的数据探查指令，以对多个数据表的多个目标字段并行执行数据探查。

2.根据权利要求1所述的方法，其特征在于，所述确定多个数据表的多个目标字段，包括：

获取字段的使用频次；

根据所述使用频次，确定目标字段。

3.根据权利要求1所述的方法，其特征在于，所述确定多个数据表的多个目标字段，包括：

确定数据表的重要程度；

根据所述重要程度，确定目标数据表；

将目标数据表的字段作为目标字段。

4.根据权利要求1所述的方法，其特征在于，所述生成各数据表的数据探查指令，包括：

根据目标字段的字段类型，生成用于确定目标字段的数据质量指标的查询子句。

5.根据权利要求1所述的方法，其特征在于，所述数据表的数据探查指令，采用如下方式生成：

生成读取所述数据表的多个目标字段数据的语句；

生成根据读取到的多个目标字段数据对所述多个目标字段并行执行数据探查的语句。

6.根据权利要求1所述的方法，其特征在于，周期性执行所述方法；

所述方法还包括：

存储历史数据探查结果；

根据当前数据探查结果和历史数据探查结果，获取所述数据表的元数据变化信息；

展示所述元数据变化信息。

7.根据权利要求6所述的方法，其特征在于，所述根据当前数据探查结果和历史数据探查结果，获取所述数据表的元数据变化信息，包括：

获取当前数据探查结果相对历史数据探查结果的波动数据；

根据所述波动数据，获取所述数据表的数据源的元数据变化信息。

8.根据权利要求1所述的方法，其特征在于，周期性执行所述方法；

所述方法还包括：

存储历史数据探查结果；

若当前数据探查结果符合质量合格条件、但相对历史数据探查结果的波动数据符合异常波动条件，则将当前数据探查结果作为异常数据。

9.一种数据质量检测装置，其特征在于，包括：

字段确定单元，用于确定多个数据表的多个目标字段；

指令生成单元，用于生成各数据表的数据探查指令；

指令并行执行单元，用于并行执行多个数据表的数据探查指令，以对多个数据表的多个目标字段并行执行数据探查。

10.一种电子设备，其特征在于，包括：

处理器和存储器；

存储器，用于存储实现根据权利要求1至8任一项所述的数据质量检测方法的程序，该设备通电并通过所述处理器运行该方法的程序。