[发明专利]一种多口径数据融合分析的新方法在审
申请号: | 202211072919.2 | 申请日: | 2022-09-02 |
公开(公告)号: | CN115563090A | 公开(公告)日: | 2023-01-03 |
发明(设计)人: | 雷斌 | 申请(专利权)人: | 上海雷昶科技有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/25 |
代理公司: | 上海唯智赢专利代理事务所(普通合伙) 31293 | 代理人: | 刘朵朵 |
地址: | 201205 上海市宝山*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 口径 数据 融合 分析 新方法 | ||
1.一种多口径数据融合分析的新方法,应用于电子装置,其特征在于,包括如下步骤:
(1)采用数据探查技术获取业务数据源的元数据,建立基础维度表;
(2)根据所述基础维度表,结合各个系统的数据口径,构建数据口径立方体;
(3)采用数据汇聚技术,建立数据贴源层;
(4)综合所述数据贴源层和所述数据口径立方体,构建数据立方体,并将数据索引写入对应的所述数据口径立方体;
(5)基于业务数据口径,遍历所述数据口径立方体获取所述数据索引,并以此在所述数据立方体中查询到相应数据。
2.根据权利要求1所述的多口径数据融合分析的新方法,其特征在于:所述步骤1包括:
(1.1)通过JDBC进行数据探查,获取到相应数据库的所有元数据;
(1.2)根据具体业务的特点,抽出必要的元数据,通过关系数据库的外键关联构成星型模型,建立基础维度表。
3.根据权利要求1所述的多口径数据融合分析的新方法,其特征在于:所述步骤2中构建数据口径立方体包括如下步骤:
(2.1)基于各个业务系统建立业务数据口径,每个业务数据口径都是一个单独的功能模块;
(2.2)基于分析平台建立分析平台的标准数据口径;
(2.3)以所述业务数据口径和所述标准数据口径为基础建立层次型混合数据口径,构建数据口径立方体。
4.根据权利要求1所述的多口径数据融合分析的新方法,其特征在于:所述数据口径立方体使用图数据库存储,实现同一维度到多数据口径的映射关系。
5.根据权利要求1所述的多口径数据融合分析的新方法,其特征在于:所述步骤3中数据汇聚技术使用DataX构建贴源层。
6.根据权利要求1所述的多口径数据融合分析的新方法,其特征在于,所述步骤4中构建数据立方体包括:
(4.1)遍历所述数据口径立方体,汇聚各数据口径对应的数据;
(4.2)基于层次分析法,构建所述数据立方体。
7.根据权利要求1所述的多口径数据融合分析的新方法,其特征在于:所述数据立方体采用HBase存储。
8.一种多口径数据融合分析系统,其特征在于,包括:
数据采集模块:用于采用数据探查技术获取业务数据源的元数据,建立基础维度表;
数据口径立方体建立模块:用于根据所述基础维度表,结合各个系统的数据口径,构建数据口径立方体;
数据汇聚模块:用于采用数据汇聚技术,建立数据贴源层;
数据立方体建立模块:用于综合所述数据贴源层和所述数据口径立方体,构建数据立方体,并将数据索引写入对应的所述数据口径立方体;
数据分发模块:用于基于业务数据口径,遍历所述数据口径立方体获取所述数据索引,并以此在所述数据立方体中查询到相应数据。
9.一种设备,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,其特征在于:所述处理器执行所述计算机程序时实现如权利要求1-7中任意一项所述的多口径数据融合分析的新方法。
10.一种计算机可读存储介质,所述计算机可读存储介质包括存储的计算机程序,其特征在于:在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如权利要求1-7中任意一项所述的多口径数据融合分析的新方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海雷昶科技有限公司,未经上海雷昶科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211072919.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种降低铜冶炼渣浮选尾矿含铜的工艺
- 下一篇:一种龙门磨床装夹结构及方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置