[发明专利]一种基于数据质量的数据治理系统

摘要

一种基于数据质量的数据治理系统，该数据治理系统进行元数据的采集，通过配置底层数据源和悬挂点，形成指定系统的元数据库；对元数据库中的数据进行信息孤岛的筛查，即通过将元数据库采集到的主外键关联关系进行提取，将没有通过主外键关联形成数据流连通的信息孤岛数据在列表中展示，提示用户进行修改和完善，同时根据问题数据数量比例进行打分；对元数据中字段名、字段类型、字段长度进行和数据标准词典的比对，将任意一项不符的元数据提取出来在前端UI界面展现，实现数据标准化情况评估，同时根据问题数据比例进行打分。

主权项

一种基于数据质量的数据治理系统，其特征在于，该数据治理系统的数据治理执行以下步骤：A1，进行元数据的采集，通过配置底层数据源和悬挂点，形成指定系统的元数据库；A2，对元数据库中的数据进行信息孤岛的筛查，即通过将元数据库采集到的主外键关联关系进行提取，将没有通过主外键关联形成数据流连通的信息孤岛数据在列表中展示，提示用户进行修改和完善，同时根据问题数据数量比例进行打分；A3，对元数据中字段名、字段类型、字段长度进行和数据标准词典的比对，将任意一项不符的元数据提取出来在前端UI界面展现，实现数据标准化情况评估，同时根据问题数据比例进行打分；A4，对数据内容进行评估：首先，对评估指标进行定制，包括完整性、一致性、精确性、唯一性、有效性、及时性和安全性指标；系统提供检核指标制定模板，选择对应的检核目标，配置相应的检核指标，同时配置相应的指标权重，形成检核模板之中完整的一条检核指标，多个检核指标组合成一套检核模板，应用于专属的一个待检核系统中；最后，校验元数据中字段对应的数值，形成评估结果报表，报表包括评估单项指标打分结果与其权重乘积求和的分数、情况说明，具体失分项以及各单个指标评估结果，最终构建数据质量问题知识库，进行历史记录管理，方便后期查阅。