[发明专利]一种可视化OLAP的应用实现方法及系统

权利要求书

1.一种可视化OLAP的应用实现方法，其特征在于，包括如下步骤：

S1.通过ETL工具，将海量的关系型数据和数据文件进行高速传输和合并形成业务数据，将业务数据存储在支持分布式、列式存储的Hadoop集群中；

S2.通过可视化定义工具在业务数据中定义维度和度量，并自动生成多维分析的MDX语言，同时使用可视化的分析器通过GUI执行已经定义的多维分析命令；

S3.多维分析服务器接收提交的分析命令，使用Impala对提交的命令进行分析，分析以后将Hadoop中的数据抽取到内存中，进行分布式计算，最后将返回的结果生成用户自定义报表，多维分析处理过程为：

首先多维分析服务器与Impala结合，通过hive2server JDBC驱动连接Impala服务，执行其SQL查询引擎访问存储在Hbase中的事实数据，其次使用Mondrian Server应用聚合策略，通过分布式的分组查询，将聚合数据读取到内存中形成缓存数据，最后通过可视化工具，对聚合后的缓存数据进行展示。

2.如权利要求1所述的可视化OLAP的应用实现方法，其特征在于：步骤S1中所述的ETL工具为Storm、Kafka、Flume、Kettle、Sqoop中的一种或几种。

3.如权利要求1或2所述的可视化OLAP的应用实现方法，其特征在于：步骤S1中所述的业务数据存储在Hadoop的Hdfs和Hbase中。

4.如权利要求3所述的可视化OLAP的应用实现方法，其特征在于：所述的可视化工具为Pivot表，饼图，线状图，条形图和分析图中的一种或几种。

5.一种可视化OLAP的应用实现系统，其特征在于，包括：

存储单元，其放置在Hadoop集群服务器上，通过远程Hive和Impala的Java API连接访问，所述存储单元用于存储ETL后的数据；

表现单元，其用于提供多客户端方式展示多维数据集，利用浏览器展示Pivot表、饼图、线状图、条形图以及分析图；

模式管理器，其用于将Schema配置文件解析成维度模型、星型模型、以及Sql模型，且与Impala配合；

计算单元，其用于解析、校验和执行MDX查询，所述的计算单元包括集成连接的维度度量定义模块，多维分析执行模块及可视化分析查询器，所述维度度量定义模块用于自动生成大数据平台下多维分析的MDX语言，构建动态的可支持Impala的SQL标准；

聚合单元，其用于接收由所述计算单元批量发送的数据、维护和创建聚合缓存，利用Mondrian Server应用聚合策略，通过分布式的分组查询，将聚合数据读取到内存中形成缓存数据；

所述的表现单元置于Tomcat服务器上，所述的模式管理器、聚合单元和计算单元设于同一台包含核心框架的服务器上。