[发明专利]一种数据质量管理方法及系统

权利要求书

1.一种数据质量管理方法，其特征在于，该方法包括：

对数据观测指标进行配置，获得指标配置表，其中，所述数据观测指标表征数据报送中的关注点，所述指标配置表包括：支持分系统运算、支持分省运算、支持不同频度运算、支持指标依赖、支持指标明细存储、支持部分指标执行和支持多维度计算；

对所述指标配置表中的指标配置信息，对所述数据观测指标进行计算获得指标值，并根据所述指标值在预设时间范围内的变化数据，生成指标数据质量报告；

确定监管报送数据的主题，其中，所述主题包括上游系统数据、人工补录数据、数据报送、反馈错误和逾期数据；

对所述上游系统数据进行数据来源分析，并进行数据校验分析，获得上游系统数据分析结果；

对所述人工补录数据进行数据量统计，并进行补录原因分析，获得人工补录数据分析结果；

对所述数据报送进行分析，获得数据报送结果，其中，所述数据报送结果包括正常报送数据量和逾期报送数据量；

根据预设字段维度对所述反馈错误进行分析，获得反馈错误分析结果；

对所述逾期数据进行统计分析，获得逾期数据分析结果；

根据所述上游系统数据分析结果、人工补录数据分析结果、数据报送结果、反馈错误分析结果和逾期数据分析结果，生成主题化的数据质量报告；

根据所述指标值，确定预警阈值，对所述数据观测指标进行预警处理，获得预警信息；

根据所述指标数量质量报告、所述主题化的数据质量报告和所述预警信息，生成数据质量监控分析报告。

2.根据权利要求1所述的方法，其特征在于，所述对数据观测指标进行配置，获得指标配置表，包括：

获取数据报送中的关注点，将所述关注点定义为数据观测指标；

根据各个关注点之间的关联关系，确定各个数据观测指标之间的指标依赖关系；

对所述指标依赖关系进行校验，获得满足校验条件的指标依赖关系；

根据所述数据观测指标和校验后的指标依赖关系，对所述数据观测指标进行配置，获得指标配置表。

3.根据权利要求2所述的方法，其特征在于，所述对所述指标配置表中的指标配置信息，对所述数据观测指标进行计算获得指标值，并根据所述指标值在预设时间范围内的变化数据，生成指标数据质量报告，包括：

对所述指标配置表中的指标配置信息进行解析，获得指标运算模式；

判断所述指标配置表中是否存在待运算指标，如果是，则确定与所述待运算指标相匹配的指标运算模式；

根据与所述待运算指标相匹配的指标运算模式，对所述待运算指标进行汇总计算，获得指标值；

根据所述指标值在预设时间范围内的变化数据，生成指标数据质量报告，其中，所述指标数据质量报告用于对数据观测指标的相关数据进行可视化展示。

4.根据权利要求1所述的方法，其特征在于，所述根据所述指标值，确定预警阈值，对所述数据观测指标进行预警处理，获得预警信息，包括：

根据所述指标值，计算获得数据观测指标的均值和方差；

根据所述均值和方差，确定所述数据观测指标的置信区间；

基于所述置信区间，确定预警阈值；

依据所述预警阈值，对所述数据观测指标进行预警处理，获得预警信息。