[发明专利]业务系统数据分发处理方法、装置及存储介质

权利要求书

1.一种业务系统数据分发处理方法，其特征在于，所述方法包括步骤：

消息队列监听器接收数据处理指令；

所述消息队列监听器根据所述数据处理指令统计前端业务系统所有待处理的业务表；

所述消息队列监听器将各个所述待处理的业务表分发至多个消息队列统计监听器进行并发统计；

每个所述消息队列统计监听器在接收到统计所述待处理的业务表的指令后，统计所述待处理的业务表的总数据量；

每个所述消息队列统计监听器根据所述总数据量和预设数据量将所述待处理的业务表的数据进行切分，生成多个待处理子任务；及

每个所述消息队列统计监听器将所述待处理子任务分发至多个数据处理设备进行并行处理。

2.如权利要求1所述的业务系统数据分发处理方法，其特征在于，该方法还包括步骤：

当发生所述待处理子任务处理失败时，所述消息队列统计监听器自动进行任务失败重试。

3.如权利要求1或2所述的业务系统数据分发处理方法，其特征在于，所述统计前端业务系统所有待处理的业务表的步骤包括：

统计所有前端业务系统的所有待制证数据；

根据oracle数据库中保存的配置表统计出所述待制证数据中哪些是日制证任务及哪些业务表需要做制证数量统计分析，从而统计出所有待处理的业务表。

4.如权利要求1或2所述的业务系统数据分发处理方法，其特征在于，所述将各个所述待处理的业务表分发至多个消息队列统计监听器进行并发统计的步骤包括：

将统计出的所有待处理的业务表按预设规则进行切分，将切分后的每个统计任务发送至第一消息队列，供各个所述消息队列统计监听器通过监听所述第一消息队列获取消息并执行，从而将所述待处理的业务表分发至多个所述消息队列统计监听器进行并发统计。

5.如权利要求4所述的业务系统数据分发处理方法，其特征在于，所述预设规则为以一个业务表为单位进行任务切分，将每个待处理的业务表的统计任务作为一个消息，发送至所述第一消息队列。

6.如权利要求1或2所述的业务系统数据分发处理方法，其特征在于，所述根据所述总数据量和预设数据量将所述待处理的业务表的数据进行切分，生成多个待处理子任务的步骤包括：

每个消息队列统计监听器根据所统计的所述待处理的业务表的总数据量，将所述待处理的业务表的数据按预设数据量进行切分，生成多个待处理子任务，且将每个待处理子任务的任务信息写入oracle数据库中保存的任务表中作为运行记录，其中，所述总数据量和预设数据量以业务表的行数表示。

7.如权利要求1或2所述的业务系统数据分发处理方法，其特征在于，所述将所述待处理子任务分发至多个数据处理设备进行并行处理的步骤包括：

每个消息队列统计监听器将所切分的每一个子任务作为一个消息，发送至第二消息队列，供各个所述数据处理设备通过监听所述第二消息队列获取消息并进行业务处理，从而将所述待处理子任务分发到多个所述数据处理设备进行并行处理。

8.如权利要求2所述的业务系统数据分发处理方法，其特征在于，所述当发生所述待处理子任务处理失败时，所述消息队列统计监听器自动进行任务失败重试的步骤包括：

通过监控页面对第二消息队列中各个消息的处理进度进行实时监控，当有待处理子任务的执行遇到问题时，重新将出现问题的子任务生成新的消息，发送至所述第二消息队列，从而分发到其他数据处理设备重新进行处理。

9.一种业务系统数据分发处理装置，其特征在于，所述装置包括存储器、处理器，所述存储器上存储有可在所述处理器上运行的业务系统数据分发处理系统，所述业务系统数据分发处理系统被所述处理器执行时实现如权利要求1-8中任一项所述的业务系统数据分发处理方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有业务系统数据分发处理系统，所述业务系统数据分发处理系统可被至少一个处理器执行，以使所述至少一个处理器执行如权利要求1-8中任一项所述的业务系统数据分发处理方法的步骤。