[发明专利]分布式统计分析系统的配置方法及分布式统计分析系统

权利要求书

1.一种分布式统计分析系统的配置方法，其特征在于，该配置方法包括以下步骤：

步骤一、选举计算节点集群中的领导节点，根据数据分片原则在各个计算节点中分片数据，并在数据分片的副本中选举领导分片；

步骤二、服务节点收到统计分析请求后，向领导节点申请由内部服务器运行的内部计算节点，内部计算节点的任务量处于饱和时，向领导节点申请由外部服务器运行的外部计算节点；

步骤三、领导节点将内部计算节点和外部计算节点反馈给服务节点；服务节点获得反馈的内部计算节点和外部计算节点后，将统计请求发送给该内部计算节点和外部计算节点；内部计算节点和外部计算节点查找领导分片并向领导分片申请得到空闲的数据分片副本，并将统计任务分配给该数据分片副本执行统计任务。

2.根据权利要求1所述的分布式统计分析系统的配置方法，其特征在于：在步骤三中，服务节点向外部计算节点发送统计请求前，通过明文加密方法将统计请求加密，在外部计算节点处通过密文解密秘钥进行解码，以避免统计请求在传输的途中被截获导致统计请求外泄。

3.根据权利要求1所述的分布式统计分析系统的配置方法，其特征在于：所述服务节点与外部计算节点间通过多频段跳频的WiFi级联技术连接。

4.根据权利要求3所述的分布式统计分析系统的配置方法，其特征在于：所述服务节点所产生的数据流量由流量实时监控系统检测，同时通过预设告警阈值，在流量异常时发现，主动发出告警。

5.根据权利要求2所述的分布式统计分析系统的配置方法，其特征在于：所述加密后的统计请求经过压缩后再进行发送，到达外部计算节点处解压缩。

6.根据权利要求1所述的分布式统计分析系统的配置方法，其特征在于：所述内部计算节点只能通过指定的服务节点访问，通过访问地址的限制和账号控制来防止其他服务节点的访问，对其他的服务节点进行屏蔽。

7.一种分布式统计分析系统，其特征在于：包括集群管理模块，用于选举计算节点集群中的领导节点，根据数据分片原则在各计算节点中分片数据，并在数据分片的副本中选举领导分片；统计分析模块，用于服务节点收到统计分析请求后，向领导节点申请由内部服务器运行的内部计算节点，内部计算节点的任务量处于饱和时，向领导节点申请由外部服务器运行的外部计算节点；领导节点将内部计算节点和外部计算节点反馈给服务节点；服务节点获得反馈的内部计算节点和外部计算节点后，将统计请求发送给该内部计算节点和外部计算节点；内部计算节点和外部计算节点查找领导分片并向领导分片申请得到空闲的数据分片副本，并将统计任务分配给该数据分片副本执行统计任务；加密模块，用于通过明文加密方法将统计请求加密，在外部计算节点处通过密文解密秘钥进行解码，以避免统计请求在传输的途中被截获导致统计请求外泄；压缩模块，用于将加密后的统计请求经过压缩后再进行发送，到达外部计算节点处解压缩；流量告警模块，用于将服务节点所产生的数据流量由流量实时监控系统检测，同时通过预设告警阈值，在流量异常时发现，主动发出告警。