[发明专利]用于大数据多维分析的方法、装置及系统

说明书

本申请公开一种用于大数据多维分析的方法、装置及系统。该方法包括：根据原始数据生成结构化数据；将所述结构化数据经过分布式集群加工处理为预定数据模型；通过分布式分析引擎与所述预定数据模型生成多维分析体；以及利用网页调用所述多维分析体以进行大数据分析。本申请公开的用于大数据多维分析的方法、装置及系统，能够屏蔽数据分析的技术难度，业务分析人员通过web页面拖拽关心的维度和指标即可快速生产需要的报表数据。

技术领域

本发明涉及大数据分析处理领域，具体而言，涉及一种用于大数据多维分析的方法、装置及系统。

背景技术

近年来数据资产在各企业中越发重要，是企业进行商业智能(BI)的基础。多维分析是商业智能的重要实现方式之一，在创建完成多维分析体Cube之后，各位领导人员、技术开发人员、业务分析人员在可视化界面通过简单的拖拽自己需要的维度和指标即可形成表格、饼图、仪表盘、柱状图、趋势图等。在各行业BI数据统计分析项目与系统实施过程中，为满足各类领导层、技术与业务人员的相同业务范围不同维度组合下的业务指标分析场景，会采用多维分析工具来实现。当前主流BI解决方案厂家的多维分析工具可例如包括：IBMCognos、Microstrategy(MSTR)、BusinessObjects等。

由于多维分析(MOLAP)本身是对分析数据的预加工(实质是实现不同维度与指标的组合数据提前计算并保存数据结果)，通过多维分析web前端人性化自助查询功能即可直接实现从多维分析数据集中加载实现用户关心的数据分析结果。该种方式高效且快速，非常适用用中大型企业对于重点业务满足各类人员数据分析的需要。目前实现多维分析的方法分为两种：一种是采用第三方商业公司的BI产品套件，如：IBM Cognos、Microstrategy(MSTR)、BusinessObjects等；另一种是采用开源多维分析技术进行二次开发，如：Mondrian、Palo等。但是，由于商业公司多维分析产品价格昂贵，而且商业公司多维分析产品不利于企业个性化产品功能扩展，第三方公司的商业化多维分析产品使用不便。而目前存在的利用Mondrian、Palo等开源技术生成的多维分析方法也存在各种技术缺陷。

因此，需要一种新的用于大数据多维分析的方法、装置及系统。

在所述背景技术部分公开的上述信息仅用于加强对本发明的背景的理解，因此它可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

有鉴于此，本发明提供一种用于大数据多维分析的方法、装置及系统，能够屏蔽数据分析的技术难度，业务分析人员通过web页面拖拽关心的维度和指标即可快速生产需要的报表数据。

本发明的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本发明的实践而习得。

根据本发明的一方面，提出一种用于大数据多维分析的方法，该方法包括：根据原始数据生成结构化数据；将结构化数据经过分布式集群加工处理为预定数据模型；通过分布式分析引擎与预定数据模型生成多维分析体；以及利用网页调用多维分析体以进行大数据分析。

在本公开的一种示例性实施例中，根据原始数据生成结构化数据，包括：将原始数据通过Hadoop集群进行储存，以生成结构化数据。

在本公开的一种示例性实施例中，将结构化数据经过分布式集群加工处理为预定数据模型，包括：将结构化数据经过Hadoop集群中的Hive数据仓库加工处理为预定数据模型。

在本公开的一种示例性实施例中，预定数据模型，包括：星型数据模型。

在本公开的一种示例性实施例中，通过分布式分析引擎与预定数据模型生成多维分析体，包括：通过Kylin分析引擎与预定数据模型生成多维分析体。