[发明专利]一种基于统一数据资源池的数据治理系统

权利要求书

1.一种基于统一数据资源池的数据治理系统，其特征在于，包括：

数据接入模块，其用于将数据源的数据资源实现完整接入；

数据处理模块，其用于对数据资源进行提取、清洗、转换的标准化处理；

数据管控模块，其用于对数据资源进行数据标准管理、元数据管理、资源目录管理的全生命周期管理；

数据资源池模块，其用于对数据资源进行分级分类管理；

数据服务模块，其用于对数据资源进行服务化封装，提供数据资源服务；

数据共享交换模块，其用于对数据资源进行跨业务、跨应用、跨部门的信息共享。

2.根据权利要求1所述的一种基于统一数据资源池的数据治理系统，其特征在于，所述数据源包括外部关联部门数据、应急管理局内部业务部门及转录部门数据、社会互联网公开数据、感知数据。

3.根据权利要求1所述的一种基于统一数据资源池的数据治理系统，其特征在于，所述数据源的接入方式包括数据库接入方式、文件接入方式、接口调用方式和数据交换方式。

4.根据权利要求1所述的一种基于统一数据资源池的数据治理系统，其特征在于，所述数据接入模块包括数据探查子模块、数据读取子模块和数据对账子模块。

5.根据权利要求4所述的一种基于统一数据资源池的数据治理系统，其特征在于，所述数据探查子模块用于对来源数据进行业务探查、接入方式探查、字段探查、数据集探查、问题数据探查以及数据推送。

6.根据权利要求4所述的一种基于统一数据资源池的数据治理系统，其特征在于，所述数据读取子模块用于检测从源系统抽取的数据或从指定位置读取的数据是否与数据定义一致。不一致的停止接入，并重新进行数据的探查和定义；一致的执行进一步接入，对数据进行解密、解压操作，生成作用于数据全生命周期的记录ID，并对数据进行字符集转换，将数据转成符合数据处理要求的格式。

7.根据权利要求4所述的一种基于统一数据资源池的数据治理系统，其特征在于，所述数据对账子模块用于核对和检验数据提供方和数据接入方在某一对账节点的完整性、一致性、正确性。如果在某一对账时间点数据提供方和数据接入方分别对应的数据条数不一致，记录异常并告警。

8.根据权利要求1所述的一种基于统一数据资源池的数据治理系统，其特征在于，所述数据资源池模块包括原始库和资源库，所述原始库对数据按照来源进行标识并根据数据种类采取不同的存储机制进行存储，所述原始库中存储的数据经过清洗、转换、关联、比对的数据处理操作之后形成标准数据并存储至资源库。

9.根据权利要求8所述的一种基于统一数据资源池的数据治理系统，其特征在于，所述资源库中数据处理操作清洗包括字典表映射、数据去重处理和数据去空处理。