[发明专利]一种API服务器处理大数据的运算方法及其系统

摘要

本发明所提供的一种API服务器处理大数据的运算方法及其系统，方法包括：客户端接收用户的操作指令，向API服务器发送请求数据；API服务器接收所述请求数据，并将所述请求数据发送至消息队列集群缓冲，消息队列集群再将所述请求数据发送至分布式实时计算系统集群；分布式实时计算系统集群对所述请求数据进行业务逻辑运算，并将得到的运算结果发送至数据库存储；当客户端接收到用户的结果获取指令时，API服务器根据所述结果获取指令在数据库中查询所述运算结果并返回至客户端。本发明提供了一种低延迟、高性能、易扩展的两步式API服务器实现方法，避免了其在处理大数据时出现的高延迟、低吞吐量的问题。

主权项

1.一种API服务器处理大数据的运算方法，其特征在于，所述方法包括步骤：A、客户端接收用户的操作指令，向API服务器发送请求数据；B、所述API服务器接收所述请求数据，并将所述请求数据发送至消息队列集群缓冲，所述消息队列集群再将所述请求数据发送至分布式实时计算系统集群；C、所述分布式实时计算系统集群对所述请求数据进行业务逻辑运算，并将得到的运算结果发送至数据库存储；D、当客户端接收到用户的结果获取指令时，向API 服务器发送所述结果获取指令，所述API服务器根据所述结果获取指令在数据库中查询所述运算结果并返回至客户端；在API服务器中部署Zookeeper集群，用于集中管理配置信息并动态修改配置；所述消息队列集群部署为Kafka集群，并将Kafka集群各个节点的地址写入Zookeeper集群；所述分布式实时计算系统集群部署为Storm集群，Storm集群通过API服务器中的Zookeeper集群获取Kafka集群各个节点数据库的地址，API服务器将业务运算逻辑单独实现并打包成Topology提交给Storm集群，Topology从Kafka集群中读取消息，并进行计算，计算完成后，将计算结果分布保存到Kafka集群各个节点数据库中。