[发明专利]一种数据分析系统、方法及装置

说明书

本发明实施例提供了一种数据分析系统、方法及装置，该系统包括：应用设备、联机分析集群和联机事务集群；应用设备，接收到业务请求后，确定适用于该业务请求的集群；若确定为联机分析集群，则向联机分析集群发送第一业务指令，以使联机分析集群执行相应的任务；若确定为联机事务集群，则向联机事务集群发送第二业务指令，以使联机事务集群执行相应的任务；本方案中，集群的数据处理能力强，能够对大数据进行分析处理。

技术领域

本发明涉及分布式技术领域，特别是涉及一种数据分析系统、方法及装置。

背景技术

大数据在各行业都发挥着巨大的作用。大数据可以理解为：无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

基于此，需要提供一种对大数据进行分析处理的方案。

发明内容

本发明实施例的目的在于提供一种数据分析系统、方法及装置，以实现对大数据进行分析处理。

为达到上述目的，本发明实施例提供了一种数据分析系统，包括：应用设备、联机分析集群和联机事务集群，所述联机分析集群中包括管理部件、互联通信部件和计算部件，所述联机事务集群中包括分布式中间部件和数据库部件；其中，

所述应用设备，用于接收业务请求，确定适用于所述业务请求的集群；若所确定的集群为联机分析集群，则根据所述业务请求，向所述联机分析集群发送第一业务指令；若所确定的集群为联机事务集群，则根据所述业务请求，向所述联机事务集群发送第二业务指令；

所述管理部件，用于在接收到所述应用设备发送的第一业务指令后，根据所述第一业务指令，生成所述第一业务指令对应的任务，并通过所述互联通信部件将所生成的任务下发至所述计算部件；

所述计算部件，用于执行所述第一业务指令对应的任务；

所述分布式中间部件，用于在接收到所述应用设备发送的第二业务指令后，根据所述第二业务指令，向所述数据库部件下发所述第二业务指令对应的任务；

所述数据库部件，用于执行所述第二业务指令对应的任务。

可选的，所述系统还包括：公共备用集群，所述公共备用集群包括备用部件；其中，

所述互联通信部件，还用于向所述公共备用集群下发所述第一业务指令对应的任务；所述备用部件，用于执行所述第一业务指令对应的任务；

和/或，

所述分布式中间部件，还用于向所述公共备用集群下发所述第二业务指令对应的任务；所述备用部件，用于执行所述第二业务指令对应的任务。

可选的，所述应用设备，还用于：

在接收到业务请求后，根据所述业务请求的属性，确定适用于所述业务请求的集群；或者，根据所述业务请求的发送方与集群之间的绑定关系，确定适用于所述业务请求的集群。

可选的，所述联机分析集群为Greenplum数据库，所述联机事务集群为Cobar系统或者TDDL系统。

为达到上述目的，本发明实施例还提供了一种数据分析方法，包括：

接收业务请求，确定适用于所述业务请求的集群；

若所确定的集群为联机分析集群，则根据所述业务请求，向所述联机分析集群发送第一业务指令，以使所述联机分析集群中的计算部件执行所述第一业务指令对应的任务；

若所确定的集群为联机事务集群，则根据所述业务请求，向所述联机事务集群发送第二业务指令，以使所述联机事务集群中的数据库部件执行所述第二业务指令对应的任务。