[发明专利]一种基于业务实体的数据质量监控方法

权利要求书

1.一种基于业务实体的数据质量监控方法，其特征在于，包括：

a)确定需要进行质量监控的数据范围；

b)识别核心业务实体；

c)构建数据质量监控的底图；

d)制定数据监控规则，根据该规则监控数据质量。

2.根据权利要求1所述的数据质量监控方法，其特征在于，所述数据范围的确定方法包括以下步骤：

1)确定组织机构，分析、确定待监控数据相关组织机构，一般也是数据质量责任方；

2)分析业务能力，评估特定业务需求中涉及的基础业务能力，参考信息化架构依据业务能力确定待监控信息系统；

3)聚焦数据对象，参考各系统数据库设计确定待监控数据表范围；

4)届定时间范围，使用包括增量、全量或指定时段的方式，明确各数据表参与质量监控的数据范围。

3.根据权利要求1所述的数据质量监控方法，其特征在于：所述识别核心业务实体包括组织类实体、人物类实体、地点类实体和事件类实体；

所述组织类实体为参与业务活动的组织机构单元，可以是组织机构层级中的任何一级，具有特定业务职能；

所述人物类实体为发起业务活动或被业务活动影响到的人和物；

所述地点类实体为描述业务活动或特定事件发生的地理位置；

所述事件类实体为用以描述业务活动、业务事件的数据，其关键属性包括人物、时间、地点和事件描述。

4.根据权利要求1所述的数据质量监控方法，其特征在于，所述底图的构建过程包括以下步骤：

1)分析关键业务流程，依据步骤a)的数据范围绘制业务流程图，分析业务活动间关系以及业务信息流转情况；

2)映射核心业务实体，将识别的业务实体与业务流程中的业务环节进行匹配，明确各业务环节与业务实体间对应关系；

3)绘制数据质量监控的底图，所述底图以业务环节为横轴、组织单元为纵轴的方式绘制业务实体分布图，并使用箭头描述业务实体间数据产生的前后逻辑关系，形成箭线图；

4)匹配监控数据，分析底图中的各业务实体数据，与步骤a)确定的数据表进行匹配，建立业务实体与物理数据表之间的映射关系。

5.根据权利要求1所述的数据质量监控方法，其特征在于，所述制定数据监控规则的过程包括以下步骤：

1)分析业务实体间逻辑依赖关系，在业务上相互关联的业务实体数据间具有确定的逻辑关系；

2)依据业务实体间逻辑依赖关系编制业务数据质量检验规则，不满足逻辑依赖关系的后续业务实体数据视为问题数据，问题发生环节为后续业务环节；

3)开发数据质量监控功能，将数据质量检验规则转换为数据监控检查脚本，构建数据监控规则库，研发信息化功能周期自动检查数据。

6.根据权利要求5所述的数据质量监控方法，其特征在于：

所述逻辑关系包括存在依赖关系、计数依赖关系和指标依赖关系；

所述存在依赖关系为后续业务实体中具有前导业务实体中的某些特征属性；

所述计数依赖关系为在一定限制条件下前导业务实体中业务实例数应大于、等于后续业务中某些业务实体的业务实例数；

所述指标依赖关系为在一定限制条件下前导业务实体关键统计指标应大于、等于后续业务中某些业务实体实例关键统计指标。

7.根据权利要求6所述的数据质量监控方法，其特征在于：

所述监控功能包括监控规则库管理、业务数据质量监控和异动数据分析展示；

所述监控规则库管理用于实现监控规则及脚本集中管理，可配置监控规则执行周期、执行参数，进行监控任务调度。

所述业务数据质量监控用于结合数据底图直观展示数据质量监控结果，发出异动告警信息，以高亮标示存在数据异动的数据实体，结合动态文字提示违反的监控规则，以及相关数据条目数；

所述异动数据分析展示用于通过点击异动告警信息，可关联查看违反规则的数据，该数据包括前导业务实体实例标识、实例数、关键统计指标，后续业务实体实例标识、实例数、关键统计指标，以及规则描述。

8.根据权利要求6或7所述的数据质量监控方法，其特征在于，所述监控数据质量的过程包括：

1)根据质量检验规则，周期性检验业务实体数据间的逻辑依赖关系；

2)对于存在依赖关系，检测是否发现非依赖关系；对于计数依赖关系或指标依赖关系，检测是否发现统计数据差异；否时，重复步骤1)；是时，发出异常报警，进行异动数据查看分析。