[发明专利]一种数据中台的实现方法、装置以及电子设备

说明书

本发明实施例涉及信息技术领域，特别是涉及一种数据中台的实现方法、装置以及电子设备。该方法包括：对各项目的数据库里的数据进行汇聚；对所汇聚的数据进行存储；建立可视化界面订阅接口；接收用户通过所述界面订阅接口所选择的数据参数信息；根据所述用户所选择的数据参数，生成应用程序接口，以便于外部应用程序可以通过所述应用程序接口按所述数据参数调用所存储的数据。通过上述方法，本发明实施例可以建立一个数据共享的平台，从而使用户的使用更敏捷，可以快速地适应瞬息万变的市场。

技术领域

本发明实施例涉及信息技术领域，特别是涉及一种数据中台的实现方法、装置以及电子设备。

背景技术

在互联网时代的今天，未来是属于用好互联网，用好互联网数据的企业。企业的数据是企业的一类核心资源，例如财务系统，产品系统，客户管理系统，仓库物流管理系统等。企业对数据的管理和计算能力往往决定了企业未来的发展高度。

但是，在实现本发明实施例的过程中，发明人发现：传统的企业数据是以各个项目单独存储，单独计算的方式存在的，这样的数据存储和计算方式往往不能满足用户的需求，因此迫切需要实现一个共享的公共数据平台。

发明内容

鉴于上述问题，本发明实施例提供了一种数据中台的实现方法、装置以及电子设备，克服了上述问题或者至少部分地解决了上述问题。

根据本发明实施例的一个方面，提供了一种数据中台的实现方法，包括：对各项目的数据库里的数据进行汇聚；对所汇聚的数据进行存储；建立可视化界面订阅接口；接收用户通过所述界面订阅接口所选择的数据参数信息；根据所述用户所选择的数据参数，生成应用程序接口，以便于外部应用程序可以通过所述应用程序接口按所述数据参数调用所存储的数据。

在一种可选的方式中，所述对各项目的数据库里的数据进行汇聚的步骤，进一步包括：通过日志同步软件，获取所述数据库的日志并进行解析；将所述经过解析的所述日志存入分布式消息发布订阅系统；对所述数据库里的源数据制作一次性数据快照；每隔预设时间间隔从所述分布式消息发布订阅系统中获取所述日志；将所述一次性数据快照与从所述分布式消息发布订阅系统中获取的所述日志进行汇聚。

在一种可选的方式中，所述对所汇聚的数据进行存储的步骤，进一步包括：根据预设维度建模模型，将所述汇聚的数据存入公共维度模型层。

在一种可选的方式中，所述公共维度模型层具体包括汇总事实表、明细事实表以及维度表。所述将所述汇聚的数据存入公共维度模型层的步骤，进一步包括：将所述汇聚的数据进行维度物理化之后以宽表的形式存为所述维度表；根据所述汇聚的数据，制作与各所述维度表对应的所述明细事实表，所述明细事实表存储的是所述汇聚的数据中原始粒度的明细数据，一张所述维度表可以对应一张或多张所述明细事实表；将所述维度表以及与其对应的所述明细事实表进行聚合，以宽表的形式存为所述汇总事实表。

在一种可选的方式中，所述对所汇聚的数据进行存储的步骤，还包括：将所述汇聚的数据存储为操作数据层。

根据本发明实施例的另一个方面，提供了一种数据中台的实现装置，包括:数据汇聚模块，用于对各项目的数据库里的数据进行汇聚；数据存储模块，用于对所汇聚的数据进行存储；接口建立模块，用于建立可视化界面订阅接口；信息接收模块，用于接收用户通过所述界面订阅接口所选择的数据参数信息；接口生成模块，用于根据所述用户所选择的数据参数，生成应用程序接口，以便于外部应用程序可以通过所述应用程序接口按所述数据参数调用所存储的数据。

在一种可选的方式中，所述数据汇聚模块包括：第一获取单元，用于通过日志同步软件，获取所述数据库的日志并进行解析；第一数据存储单元，用于将所述经过解析的所述日志存入分布式消息发布订阅系统；数据快照制作单元，用于对所述数据库里的源数据制作一次性数据快照；第二获取单元，用于每隔预设时间间隔从所述分布式消息发布订阅系统中获取所述日志；数据汇聚单元，用于将所述一次性数据快照与从所述分布式消息发布订阅系统中获取的所述日志进行汇聚。