[发明专利]数据质量监控方法、装置、计算机设备和存储介质

权利要求书

1.一种数据质量监控方法，其特征在于，所述方法包括：

当数据仓库中的数据清洗完成后，根据事实表和维度表中对应字段的关联关系自动生成维度监控任务，其中：

所述事实表是数据仓库架构中的中央表,它包含联系事实与所述维度表的数字度量值和键，所述事实表包含描述业务内事件的数据；

所述维度表属于数据仓库中的表，所述维度表中的条目描述所述事实表中的数据，所述维度表包含创建维度所基于的数据；

所述维度监控任务是通过根据事实表和维度表中关联的对应字段，自动执行预设的结构化查询语言语句生成的；

根据所述维度监控任务对所述数据进行监控并返回维度监控结果；

若所述维度监控结果满足预设报警条件时则报警。

2.根据权利要求1所述的数据质量监控方法，其特征在于，所述根据所述维度监控任务对所述数据进行监控并返回维度监控结果，包括：

根据所述维度监控任务确定所述事实表中对应字段的值是否全部包含于所述维度表的对应字段中；

若是，则返回不满足预设报警条件的维度监控结果，否则返回满足预设报警条件的维度监控结果。

3.根据权利要求1～2任一项所述的数据质量监控方法，其特征在于，还包括：

当数据仓库完成数据同步后，获取所述数据的属性信息；

根据所述数据的属性信息对数据量进行监控并返回监控结果；

若所述监控结果满足预设条件时则报警。

4.根据权利要求3所述的数据质量监控方法，其特征在于，所述数据的属性信息包括所述数据所属的原表名，所述根据所述数据的属性信息对数据量进行监控并返回监控结果，包括：

根据所述数据所属的原表名周期性对数据进行计数；

将当前计数结果与上一周期计数结果的比值作为监控结果返回。

5.根据权利要求3所述的数据质量监控方法，其特征在于，所述预设条件包括预先设置的条件或默认条件。

6.根据权利要求3所述的数据质量监控方法，其特征在于，所述报警包括短信报警、邮件报警。

7.一种数据质量监控装置，其特征在于，所述装置包括：

监控任务生成模块，用于当数据仓库中的数据清洗完成后，根据事实表和维度表中对应字段的关联关系自动生成维度监控任务，其中：

所述事实表是数据仓库架构中的中央表,它包含联系事实与所述维度表的数字度量值和键，所述事实表包含描述业务内事件的数据；

所述维度表属于数据仓库中的表，所述维度表中的条目描述所述事实表中的数据，所述维度表包含创建维度所基于的数据；

所述维度监控任务是通过根据事实表和维度表中关联的对应字段，自动执行预设的结构化查询语言语句生成的；

监控模块，用于根据所述维度监控任务对所述数据进行监控并返回维度监控结果；

报警模块，用于若所述维度监控结果满足预设报警条件时则报警。

8.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述方法的步骤。

9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。