[发明专利]一种大数据多维分析方法及系统有效
申请号: | 201710051542.5 | 申请日: | 2017-01-23 |
公开(公告)号: | CN106897386B | 公开(公告)日: | 2019-10-29 |
发明(设计)人: | 刘春江;黎侃;柴楹;黄承松;夏里峰 | 申请(专利权)人: | 武汉奇米网络科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2453;G06F16/28 |
代理公司: | 武汉智嘉联合知识产权代理事务所(普通合伙) 42231 | 代理人: | 黄君军 |
地址: | 430000 湖北省武汉市东湖*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 多维 分析 方法 系统 | ||
本发明公开了一种大数据多维分析方法及系统,其中,方法包括:构建多个CUBE,识别各CUBE含义相同的维度名称,建立维度匹配关系表,生成含义相同的维度名称的公用维度名称,用户选择公用维度名称和指标名称,查找到包含用户选择的公用维度和指标的第三CUBE名称集合;生成SQL语句,从第三CUBE名称集合的各CUBE中分别查询数据,将查询结果放入内存中缓存;将查询结果进行拼装,得到结果集,显示结果集对应的图表。有益效果:建立各CUBE的维度匹配关系,用户选择维度和指标查询数据,查询各CUBE中的符合条件的数据并放入内存缓存,再将内存中的数据进行拼装成结果集并以图表展现,实现了跨CUBE的数据查询,效率高、查询方便、不需要人工对信息进行整合。
技术领域
本发明涉及计算机技术领域,尤其是涉及一种大数据多维分析方法及系统。
背景技术
在大数据行业内,多维分析是一项很重要的技术,能提供给分析人员,多角度、多粒度、多指标的自由组合查询,为数据探索和分析提供了巨大便捷。区别于传统的报表开发,具有高自由度、高扩展性、覆盖面广、低维护成本的优势。
一般而言,多维分析的方法是预先建立好多维数据立方体模型(CUBE),当用户在选择好指标和维度后,进行查询,配合业内常用的OLAP计算引擎,从CUBE中,拉取并计算得到最终用户想要的结果,并以特定的图表形式呈现。
但是,用户的数据探索需求不固定、多种多样,而预先建立好的CUBE都是相互独立的,且没办法用一个CUBE囊括所有的业务指标和维度,即使有,实现成本巨大。那么当出现用户需要的信息跨多个CUBE的时候,就只能用多次查询,然后再自己做信息整合,显然这样会导致使用体验不好,效率降低。
发明内容
本发明的目的在于克服上述技术不足,提出一种大数据多维分析方法及系统,解决现有技术的多维分析中跨CUBE查询不方便、效率低下的技术问题。
为达到上述技术目的,本发明的技术方案提供一种大数据多维分析方法,包括:
S1、构建多个CUBE,CUBE包含维度信息和指标信息,将CUBE的维度信息和指标信息存入第一数据库表,以CUBE名称来标示不同的CUBE,以维度名称和指标名称来标示CUBE的维度和指标;
S2、识别各CUBE含义相同的维度名称,建立含义相同的维度名称之间的匹配关系表,将匹配关系表存入第二数据库表,生成含义相同的维度名称的公用维度名称,含义相同的各维度名称定义为原维度名称,第二数据库表还包括:原维度名称和原维度名称所属的CUBE名称的对应关系表;
S3、用户选择公用维度名称,由公用维度名称获取原维度名称,由原维度名称可查询第二数据库表中的对应关系表得到第一CUBE名称集合,
用户选择指标名称查询第一数据库表获取包含用户选择的指标的第二CUBE名称集合,
综合第一CUBE名称集合和第二CUBE名称集合,得到包含用户选择的公用维度和指标的第三CUBE名称集合;
S4、获取第三CUBE名称集合中的CUBE名称数量为第一数量,生成第一数量的SQL语句;
S5、将生成的第一数量的SQL语句提交给查询引擎执行,从第三CUBE名称集合的各CUBE中分别查询数据,得到第一数量的查询结果,将查询结果放入内存中缓存;
S6、根据第二数据库表中的匹配关系表,将第一数量的查询结果进行拼装,得到结果集,按照用户需求,显示结果集对应的图表。
本发明还提供一种大数据多维分析系统,包括:
创建CUBE模块:构建多个CUBE,CUBE包含维度信息和指标信息,将CUBE的维度信息和指标信息存入第一数据库表,以CUBE名称来标示不同的CUBE,以维度名称和指标名称来标示CUBE的维度和指标;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉奇米网络科技有限公司,未经武汉奇米网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710051542.5/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置