[发明专利]一种大数据存储系统集成系统

摘要

本发明公开了一种大数据存储系统集成系统，包括存储模块、集成模块和传输模块，存储模块和集成模块之间通过传输模块相连接；存储模块包括数据采集层、数据挖掘层、数据处理层、数据运算层、数据传输层以及数据源中心，数据采集层、数据挖掘层、数据处理层、数据运算层、数据传输层和数据源中心之间通过无线或者有线网络依次连接；集成模块包括数据编译层、在线历史库层、离线归档库层和数据仓库品台层，数据编译层、在线历史库层、离线归档库层和数据仓库品台层之间通过无线或者有线网络依次连接；本发明通过设置的存储模块和集成模块，能够有效实现其数据信息的统一管理，并且在数据调用的过程中实现自由读取的目的。

主权项

1.一种大数据存储系统集成系统，其特征在于，包括存储模块(1)、集成模块(2)和传输模块(3)，存储模块(1)和集成模块(2)之间通过传输模块(3)相连接；存储模块(1)包括数据采集层(11)、数据挖掘层(12)、数据处理层(13)、数据运算层(14)、数据传输层(15)以及数据源中心(16)，数据采集层(11)、数据挖掘层(12)、数据处理层(13)、数据运算层(14)、数据传输层(15)和数据源中心(16)之间通过无线或者有线网络依次连接；数据采集层(11)，用于采集本地系统、异地系统和互联网对应大数据，其包括用于接收和发送数据的数据收发器，所述数据收发器包括用于采集本地系统、异地系统对应数据的本地采集器、用于采集互联网信息的互联网数据采集器、用于接收数据仓库品台层(24)发送数据的接收器、以及用于向数据挖掘层(12)发送数据的发送器；数据挖掘层(12)，用于挖掘所述数据采集层(11)中的用户大数据，并对数据采集层(11)中的本地采集器、互联网数据采集器和接收器采集的数据进行解析，以判断对应数据的来源与目的；数据处理层(13)，对从所述数据挖掘层(12)挖掘后的数据进行分析；数据运算层(14)，用于将所述用户大数据进行加密处理；数据传输层(15)，用于将加密后的用户大数据进行传输；数据源中心(16)，用于存储加密后的用户大数据；集成模块(2)包括数据编译层(21)、在线历史库层(22)、离线归档库层(23)和数据仓库品台层(24)，数据编译层(21)、在线历史库层(22)、离线归档库层(23)和数据仓库品台层(24)之间通过无线或者有线网络依次连接；数据编译层(21)，用于对数据源中心(16)存储的用户大数据进行编辑，并将编辑后的相关数据存储在所述在线历史库层(22)中；在线历史库层(22)，根据数据的活跃情况将数据存储到所述离线归档库层(23)中；离线归档库层(23)，用于存储在线历史库层(22)传送过来的数据信息，并将该数据信息发送给数据仓库品台层(24)；数据仓库品台层(24)，对整理出的数据进行存储并构建数据集成的总体架构，实现与各业务系统数据的交互。