[发明专利]一种基于Spark的分布式多层大数据分析处理模型

权利要求书

1.一种基于Spark的分布式多层大数据分析处理模型，其特征在于，包括表示层PT、前端交换层FST、后端交换层BST、实时业务逻辑层RBLT、非实时业务逻辑层NRBLT和数据访问层DAT；其中表示层PT与前端交换层FST进行数据传输，前端交换层FST的输出端与媒介的输入端连接；媒介与后端交换层BST进行数据传输；后端交换层BST的输出端与实时业务逻辑层RBLT的输入端和非实时业务逻辑层NRBLT的输入端连接；实时业务逻辑层RBLT的输出端和非实时业务逻辑层NRBLT的输出端均与数据访问层DAT的输入端连接；所述实时业务逻辑层RBLT还包括表示节点和对接中心；所述表示节点通过喷口与媒介进行数据传输；所述对接中心通过螺栓与媒介进行数据传输；

所述非实时业务逻辑层NRBLT用于存储决策策略；其中所述决策策略存储在MongoDB中，利用R程序和Spark RDD即可获得快速访问大型数据集的接口；

所述数据访问层DAT包括实时数据资源库、交换中心、基线和数据仓库；其中实时数据资源库对交换中心进行实时数据访问。

2.根据权利要求1所述的一种基于Spark的分布式多层大数据分析处理模型，其特征在于，所述表示层PT从BLT获取数据并使用服务来处理从用户到后端集群的所有请求。

3.根据权利要求1所述的一种基于Spark的分布式多层大数据分析处理模型，其特征在于，所述前端交换层FST还包括部署在节点上的前端服务器，所述前端交换层FST负责接收web请求，并通过Kafka消息系统将web请求传递至

4.根据权利要求3所述的一种基于Spark的分布式多层大数据分析处理模型，其特征在于，所述前端服务器为部署了MongoDB的前端服务器，所述MongoDB通过前端交换层FST发送至Kafka从而避免进入后端集群。

5.根据权利要求1所述的一种基于Spark的分布式多层大数据分析处理模型，其特征在于，所述后端交换层BST从Kafka获取消息，通过BST入口接口进行前端服务器与后端交换层进行信息传输。