[发明专利]一种大数据应用平台系统

权利要求书

1.一种大数据应用平台系统，其特征在于，基于HDFS的分布式存储体系框架，实现对不同数据源、不同数据类型数据的综合存储与管理；

大数据应用平台系统按照“组织”、“人”、“事”、“物”来进行抽象和维度建模：

将数据资源中与单位、组织相关的数据进行整合归并，抽象形成统一的“组织”维度；

将数据资源中与人相关的数据进行整合归并，抽象形成统一的“人”维度；

将数据资源中与业务工作相关的数据进行整合归并，抽象形成统一的“事”维度；

将数据资源中与文件、规定相关的数据进行整合归并，抽象形成统一的“物”维度。

2.根据权利要求1所述的一种大数据应用平台系统，其特征在于：大数据应用平台系统由一个NameNode和若干个DataNode组成，NameNode作为主服务器，管理文件系统命名空间和客户端对文件的访问操作，DataNode管理存储的数据。

3.根据权利要求2所述的一种大数据应用平台系统，其特征在于：从逻辑划分为以下层次：

ODS数据层：采用Hive架构，ODS层不仅仅存储业务数据的最新变化情况，同时将平台的业务数据的历史变化信息通过一定的方式进行存储；

数据汇聚层：依托数据采集平台，打通干部、人员、人才、公务员业务，形成统一的数据汇聚中枢

结构化数据存储区：采用Hive架构，按照数据仓库的建设模式，实现对各类结构化数据资源的综合管理；

非结构化数据存储区：采用NoSQL架构，实现对各类非结构化数据资源的存储与综合管理。

4.根据权利要求1所述的一种大数据应用平台系统，其特征在于：大数据应用平台系统按照“组织”、“人”、“事”、“物”进行建模后形成维度数据库；

其中，

“事”包括新设立一个机构、干部的考察谈话、干部的中青班培训、组织换届、参加组织生活、参加谈心谈话或人才申报计划；

“物”包括单位中的岗位、干部、人才、自身建设的政策制度文件、干部教育培训课件资源、服务中心的服务目录和服务事项、各人才计划工程项目或对外门户中发布的各项信息内容。

5.根据权利要求1所述的一种大数据应用平台系统，其特征在于：包括数据采集汇聚平台，数据采集汇聚平台采用SOA总体架构，数据采集汇聚平台基于ETL系统工具以及数据对接服务层软件。

6.根据权利要求1所述的一种大数据应用平台系统，其特征在于：还包括数据质量管理系统，数据质量管理系统根据预先配置的规则、算法和质量检查度量，对数据的准确性、合理性检查，以及时发现问题，解决问题。

7.根据权利要求1所述的一种大数据应用平台系统，其特征在于：还包括元数据管理系统，元数据管理系统把分散在不同系统、不同工具、不同人员中的元数据信息进行统一管理，实现数据从业务层至技术层的全面贯通。

8.根据权利要求1所述的一种大数据应用平台系统，其特征在于：数据仓库内含有业务元数据，务元数据包括以下信息：使用者的业务术语所表达的数据模型、对象名和属性名；访问数据的原则和数据来源；系统所提供的分析方法及公式、报表信息；

元数据管理系统对业务元数据的来源进行管理、对业务元数据的差异性进行对比。

9.根据权利要求1所述的一种大数据应用平台系统，其特征在于：数据仓库内含有技术元数据，技术元数据是存储关于数据仓库系统技术细节的数据，用于开发和管理数据仓库的数据，主要包括数据仓库结构的描述、ODS层的企业数据模型描述、对数据稽核规则的定义、数据集市定义描述与装载描述。

10.根据权利要求1所述的一种大数据应用平台系统，其特征在于：元数据管理系统对元数据进行分析，包含血统分析、影响分析、表重要程度分析、表无关程度分析。