[发明专利]一种海量数据的多维分析方法及装置

说明书

技术领域

本发明涉及通信技术领域，特别是指一种海量数据的多维分析方法及装置。

背景技术

在线实时多维数据分析OLAP是数据仓库系统的一种应用，它针对特定的分析主题，设计多种可能的观察方式，设计相应的分析主题结构(即进行事实表和维度表设计)，使用户在多维模型的基础上进行快速、稳定、交互式的访问，以达到复杂分析和数据预测的作用。

现阶段很多厂商的OLAP支持的数据源规模有限，支持的事实表数据量规模在TB(Terabyte万亿字节)级别规模下，不能对Hadoop(一种分布式系统架构)平台上存储的海量数据进行实时、高效地多维分析，为用户带来一定的不便。

发明内容

本发明的目的在于提供一种海量数据的多维分析方法及装置，用以解决现有的OLAP对Hadoop平台上存储的海量数据不能实时、高效地进行多维分析的的问题。

为了实现上述目的，本发明提供了一种海量数据的多维分析方法，包括：

对用户发起的多维分析查询请求进行解析处理，得到一解析结果，所述解析结果包括：所述多维分析查询请求对应的立方体多维模型信息以及结构化查询语句SQL；

获取与所述立方体多维模型信息匹配的数据源，并与所述数据源建立连接关系，其中，所述数据源包括：海量数据源Hadoop平台和/或关系数据库；

根据所述连接关系以及所述结构化查询语句SQL，从所述海量数据源Hadoop平台或者所述关系数据库获取数据查询结果；

根据所述立方体多维模型信息，将所述数据查询结果转换成多维数据结果并返回给用户。

其中，上述的海量数据的多维分析方法，所述对用户发起的多维分析查询请求进行解析处理，得到一解析结果的步骤包括：

根据用户发起的多维分析查询请求，获取相应的多维数据模型；

对所述多维数据模型进行解析，得出所述多维分析查询请求对应的立方体多维模型信息以及结构化查询语句SQL，其中，所述立方体多维模型信息包括：立方体名称。

其中，所述获取与所述立方体多维模型信息匹配的数据源，并与所述数据源建立连接关系的步骤包括：

根据数据源模型中立方体名称与数据源名称的关联关系，获取与所述立方体名称匹配的数据源模型；

获取与所述数据源模型中的数据源名称匹配的数据源；

与所述数据源建立连接关系。

其中，所述与所述数据源建立连接关系的步骤具体为：

若与所述立方体多维模型信息匹配的数据源为海量数据源Hadoop平台，则与所述海量数据源Hadoop平台建立连接关系；

若与所述立方体多维模型信息匹配的数据源为关系数据库，则与所述关系数据库建立连接关系。

其中，所述根据所述连接关系以及所述结构化查询语句SQL，从所述海量数据源Hadoop平台或者所述关系数据库获取数据查询结果的步骤包括：

若与所述海量数据源Hadoop平台建立连接关系，则向所述海量数据源Hadoop平台发送所述结构化查询语句SQL；

获取所述海量数据源Hadoop平台根据所述结构化查询语句SQL返回的数据查询结果；

若与所述关系数据库建立连接关系，则向所述关系数据库发送所述结构化查询语句SQL；

获取所述关系数据库根据所述结构化查询语句SQL返回的数据查询结果。

本发明的实施例还提供了一种海量数据的多维分析装置，包括：

解析模块，用于对用户发起的多维分析查询请求进行解析处理，得到一解析结果，所述解析结果包括：所述多维分析查询请求对应的立方体多维模型信息以及结构化查询语句SQL；

第一获取模块，用于获取与所述立方体多维模型信息匹配的数据源，并与所述数据源建立连接关系，其中，所述数据源包括：海量数据源Hadoop平台和/或关系数据库；

第二获取模块，用于根据所述连接关系以及所述结构化查询语句SQL，从所述海量数据源Hadoop平台或者所述关系数据库获取数据查询结果；

处理模块，用于根据所述立方体多维模型信息，将所述数据查询结果转换成多维数据结果并返回给用户。

其中，上述海量数据的多维分析装置，所述解析模块包括：

第一获取单元，用于根据用户发起的多维分析查询请求，获取相应的多维数据模型；

解析单元，用于对所述多维数据模型进行解析，得出所述多维分析查询请求对应的立方体多维模型信息以及结构化查询语句SQL，其中，所述立方体多维模型信息包括：立方体名称。