[发明专利]指标数据的管理方法及装置

说明书

本发明实施例公开了一种指标数据的管理方法及装置，通过定义各类外部数据源，提供一个统一接口，以获取外部多种数据源的连接信息；根据所述连接信息获取对应数据源的表格元信息；根据所述连接信息和所述表格元信息加载数据，并利用数据的明细信息构建多维数据集，形成在线分析处理所需的聚合数据，其中聚合数据的数据范围是根据指标数据的类型与区间来确定的；根据指标查询信息，利用聚合索引从所述聚合数据中获取目标数据。本发明能够大幅提高获取聚合数据的速度，在指标查询方面获得极大的效率提升，以解决相关技术中所存在的海量数据的指标查询效率低的问题。

技术领域

本申请涉及互联网技术领域，具体而言，涉及一种指标数据的管理方法、装置、计算机设备和存储介质。

背景技术

现代商业分析系统注重使用指标(Metric)来做决策分析，而指标的概念以往一般依附于Tableau、PowerBI等BI工具，没有形成独立的应用软件平台，随着指标的重要性与日俱增，独立的指标平台应运而生。

指标平台是基于大数据之上的数据聚合与分析平台，以各项指标的形式来展示数据变化与波动。业界的指标平台多基于Hadoop大数据平台，存在数据加载缓慢、计算资源扩展较差、性能瓶颈等问题。另一方面，指标平台所提供的异动分析能力大多是商业产品的独家能力，并不具备通用性。

针对相关技术中所存在的海量数据的指标查询效率低的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供一种指标数据的管理方法、装置、计算机设备和存储介质，用以解决相关技术中存在海量数据的指标查询效率低的问题。

为了实现上述目的，本发明实施例的第一方面，提供一种指标数据的管理方法，包括：

定义各类外部数据源，提供一个统一接口，以获取外部多种数据源的连接信息；

根据所述连接信息获取对应数据源的表格元信息；

根据所述连接信息和所述表格元信息加载数据，并利用数据的明细信息构建多维数据集，形成在线分析处理所需的聚合数据，其中聚合数据的数据范围是根据指标数据的类型与区间来确定的；

根据指标查询信息，利用聚合索引从所述聚合数据中获取目标数据。

可选地，在第一方面的一种可能实现方式中，其特征在于，所述方法还包括：

根据查询到的目标数据，以及对应的时间区间，获取历史或者未来一段时间范围内的异常指标或者预测指标。

可选地，在第一方面的一种可能实现方式中，其特征在于，所述方法还包括：

根据业务需求选择不同的在线分析处理数据库，以实现对预计算引擎的替换。

可选地，在第一方面的一种可能实现方式中，其特征在于，在根据所述连接信息和所述表格元信息加载数据之前，包括：

对待监测指标设置定时更新任务；

在间隔预设时间后，根据对应数据源的连接信息和表格元信息加载最新数据构建多维数据集，形成在线分析处理所需的聚合数据；

基于更新后的聚合数据快速获取最新目标结果。

本发明实施例的第二方面，提供一种指标数据的管理装置，包括：

数据源模块，用于定义各类外部数据源，提供一个统一接口，以获取外部多种数据源的连接信息；

数据目录模块，用于根据所述连接信息获取对应数据源的表格元信息；