[发明专利]一种API服务器处理大数据的运算方法及其系统

权利要求书

1.一种API服务器处理大数据的运算方法，其特征在于，所述方法包括步骤：

A、客户端接收用户的操作指令，向API服务器发送请求数据；

B、所述API服务器接收所述请求数据，并将所述请求数据发送至消息队列集群缓冲，所述消息队列集群再将所述请求数据发送至分布式实时计算系统集群；

C、所述分布式实时计算系统集群对所述请求数据进行业务逻辑运算，并将得到的运算结果发送至数据库存储；

D、当客户端接收到用户的结果获取指令时，向API 服务器发送所述结果获取指令，所述API服务器根据所述结果获取指令在数据库中查询所述运算结果并返回至客户端；

在API服务器中部署Zookeeper集群，用于集中管理配置信息并动态修改配置；

所述消息队列集群部署为Kafka集群，并将Kafka集群各个节点的地址写入Zookeeper集群；

所述分布式实时计算系统集群部署为Storm集群，Storm集群通过API服务器中的Zookeeper集群获取Kafka集群各个节点数据库的地址，API服务器将业务运算逻辑单独实现并打包成Topology提交给Storm集群，Topology从Kafka集群中读取消息，并进行计算，计算完成后，将计算结果分布保存到Kafka集群各个节点数据库中。

2.根据权利要求1所述API服务器处理大数据的运算方法，其特征在于，所述步骤B具体包括：

B1、所述API服务器接收所述请求数据，并生成一与所述请求数据相对应的请求数据身份标识；

B2、所述API服务器将所述请求数据身份标识发送至客户端，并将所述请求数据及所述请求数据身份标识发送至消息队列集群缓冲；

B3、所述消息队列集群接收所述请求数据及所述请求数据身份标识，并将所述请求数据发送至分布式实时计算系统集群。

3.根据权利要求1所述API服务器处理大数据的运算方法，其特征在于，所述数据库为Redis数据库。

4.根据权利要求2所述API服务器处理大数据的运算方法，其特征在于，所述步骤D具体包括：

D1、当客户端接收到用户的结果获取指令时，将所述请求数据身份标识发送至API服务器；

D2、所述API服务器接收所述请求数据身份标识，并根据所述请求数据身份标识在所述数据库中查询对应的运算结果；

D3、当查询到所述运算结果时，则将所述运算结果发送至客户端。

5.根据权利要求4所述API服务器处理大数据的运算方法，其特征在于，所述步骤D3之后还包括：

D4、当未查询到所述运算结果时，客户端再次发出结果获取指令，并返回执行步骤D1。

6.一种API服务器处理大数据的运算系统，其特征在于，包括：

请求发送模块，用于客户端接收用户的操作指令，向API服务器发送请求数据；

缓存及发送模块，用于所述API服务器接收所述请求数据，并将所述请求数据发送至消息队列集群缓冲，所述消息队列集群再将所述请求数据发送至分布式实时计算系统集群；

运算及存储模块，用于所述分布式实时计算系统集群对所述请求数据进行业务逻辑运算，并将得到的运算结果发送至数据库存储；

结果获取模块，用于当客户端接收到用户的结果获取指令时，向API 服务器发送所述结果获取指令，所述API服务器根据所述结果获取指令在数据库中查询所述运算结果并返回至客户端；

在API服务器中部署Zookeeper集群，用于集中管理配置信息并动态修改配置；所述消息队列集群部署为Kafka集群，并将Kafka集群各个节点的地址写入Zookeeper集群；

所述分布式实时计算系统集群部署为Storm集群，Storm集群通过API服务器中的Zookeeper集群获取Kafka集群各个节点数据库的地址，API服务器将业务运算逻辑单独实现并打包成Topology提交给Storm集群，Topology从Kafka集群中读取消息，并进行计算，计算完成后，将计算结果分布保存到Kafka集群各个节点数据库中。