[发明专利]电子平台的后台数据系统

说明书

本发明公开了一种电子平台的后台数据系统，包括多个数据分块、多个数据节点、元数据点、作业调度模块。数据节点的数量与数据分块的数量相一致，每一个数据节点中存储一个以上的数据分块，且每一个数据分块被存储在一个以上的数据节点中，元数据点中存储所有数据节点的数据，每一个数据节点中均包括任务调度器，作业调度模块连接至所有的任务调度器。本发明的电子平台的后台数据系统对特定数据平台中的核心数据进行了分布式的存储和调用，因此具有速度快、安全性高、交叉引用合理等优势。

技术领域

本发明涉及特定数据平台的数据系统，更具体地说，涉及电子平台的后台数据系统。

背景技术

目前，钢铁行业，尤其是钢铁的交易产业已经进入了大数据时代，海量的交易数据，动态变化的交易行情使得数据的处理变得尤为地重要。大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产，其数据产生速度快，处理要求快，数据生成数量大，不适合传统数据库存储，且数据来源类型丰富，例如网站日志，地理位置定位信息等。

然而，现有的数据处理模式并没有针对特定数据平台中使用的大数据进行针对性的优化，尤其是针对特定数据平台中的几个核心概念及其数据，例如钢铁的种类、品质、数量等关键信息的针对性结构优化尚未有突破性的进展，因此目前的用于特定数据平台的数据结构和数据处理还未跟上特定数据平台越来越快的发展步伐。

发明内容

针对现有技术中存在的专用电子平台的数据结构优化不到位的问题，本发明的目的是提供电子平台的后台数据系统。

为实现上述目的，本发明采用如下技术方案：

一种电子平台的后台数据系统，包括多个数据分块、多个数据节点、元数据点、作业调度模块。数据节点的数量与数据分块的数量相一致，每一个数据节点中存储一个以上的数据分块，且每一个数据分块被存储在一个以上的数据节点中，元数据点中存储所有数据节点的数据，每一个数据节点中均包括任务调度器，作业调度模块连接至所有的任务调度器。

根据本发明的一实施例，数据分块和数据节点的数量均为3个，分别是第一分块、第二分块、第三分块和第一节点、第二节点和第三节点。

根据本发明的一实施例，第一分块中存储钢铁种类信息，第二分块中存储钢铁品质信息，第三分块中存储钢铁数量信息。

根据本发明的一实施例，第一节点中存储第一分块和第二分块，第二节点中存储第一分块和第三分块，第三节点中存储第二分块和第三分块。

根据本发明的一实施例，第一节点中包括第一任务调度器，第二节点中包括第二任务调度器，第三节点中包括第三任务调度器。

根据本发明的一实施例，作业调度模块包括第一调度单元和第二调度单元，第一调度单元和第二调度单元分别交叉调用第一任务调度器、第二任务调度器、第三任务调度器。

在上述技术方案中，本发明的电子平台的后台数据系统对特定数据平台中的核心数据进行了分布式的存储和调用，因此具有速度快、安全性高、交叉引用合理等优势。

附图说明

图1是本发明电子平台的后台数据系统的结构示意图；

图2是本发明电子平台的后台数据系统的作业调度模块的结构示意图；

图3是作业调度模块的调度示意图。

具体实施方式

下面结合附图和实施例进一步说明本发明的技术方案。

如图1所示，本发明公开一种电子平台的后台数据系统，其主要模块为多个数据分块、多个数据节点、元数据点、作业调度模块，其主要有以下的4个特点：