[发明专利]业务数据的处理方法、装置和系统、存储介质、电子装置

权利要求书

1.一种业务数据的处理方法，其特征在于，包括：

获取第一分布式消息队列中的原始业务数据，其中，所述第一分布式消息队列用于保存来源于数据源的原始业务数据；

将对所述原始业务数据进行处理过的中间业务数据保存至第二分布式消息队列，其中，每个所述第二分布式消息队列用于保存一种类型的中间业务数据；

通过流处理系统对所述第二分布式消息队列中的中间业务数据进行处理。

2.根据权利要求1所述的方法，其特征在于，将对所述原始业务数据进行处理过的中间业务数据保存至第二分布式消息队列包括：

调用所述流处理系统的第一业务处理模块，对所述原始业务数据进行处理，将得到的中间业务数据保存至所述第二分布式消息队列。

3.根据权利要求2所述的方法，其特征在于，调用所述流处理系统的第一业务处理模块，对所述原始业务数据进行处理，将得到的中间业务数据保存至所述第二分布式消息队列包括以下至少之一：

调用所述流处理系统的第一业务处理模块，对所述原始业务数据进行转换处理，将得到的中间业务数据保存至所述第二分布式消息队列；

调用所述流处理系统的第一业务处理模块，对所述原始业务数据进行连接处理，将得到的中间业务数据保存至所述第二分布式消息队列；

调用所述流处理系统的第一业务处理模块，对所述原始业务数据进行聚合处理，将得到的中间业务数据保存至所述第二分布式消息队列；

调用所述流处理系统的第一业务处理模块，对所述原始业务数据进行窗口操作，将得到的中间业务数据保存至所述第二分布式消息队列。

4.根据权利要求1所述的方法，其特征在于，通过流处理系统对所述第二分布式消息队列中的中间业务数据进行处理包括：

在所述流处理系统中多个第二业务处理模块的任一业务处理模块被触发时，通过所述任一业务处理模块对所述第二分布式消息队列中的中间业务数据进行处理，将处理得到的结果保存至数据库。

5.根据权利要求1至4中任意一项所述的方法，其特征在于，在获取第一分布式消息队列中的原始业务数据之前，所述方法还包括：

在所述流处理系统中配置多个第一业务处理模块和多个第二业务处理模块，其中，所述多个第一业务处理模块被设置为允许并行运行，所述多个第二业务处理模块被设置为允许并行运行。

6.一种业务数据的处理装置，其特征在于，包括：

获取单元，用于获取第一分布式消息队列中的原始业务数据，其中，所述第一分布式消息队列用于保存来源于数据源的原始业务数据；

保存单元，用于将对所述原始业务数据进行处理过的中间业务数据保存至第二分布式消息队列，其中，每个所述第二分布式消息队列用于保存一种类型的中间业务数据；

处理单元，用于通过流处理系统对所述第二分布式消息队列中的中间业务数据进行处理。

7.根据权利要求6所述的装置，其特征在于，所述保存单元还用于：

调用所述流处理系统的第一业务处理模块，对所述原始业务数据进行处理，将得到的中间业务数据保存至所述第二分布式消息队列。

8.一种业务数据的处理系统，其特征在于，包括：

第一分布式消息队列，用于保存来源于数据源的原始业务数据；

流处理系统，用于将对所述原始业务数据进行处理过的中间业务数据保存至第二分布式消息队列，并对所述第二分布式消息队列中的中间业务数据进行处理，其中，所述流处理系统中的每个所述第二分布式消息队列用于保存一种类型的中间业务数据。

9.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，所述程序运行时执行上述权利要求1至5任一项中所述的方法。

10.一种电子装置，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器通过所述计算机程序执行上述权利要求1至5任一项中所述的方法。