[发明专利]分布式任务处理系统、方法和装置

权利要求书

1.一种分布式任务处理系统，其特征在于，所述系统包括：

任务分发端，用于基于每个待处理任务对应的锁从加锁数据库存储的待处理任务队列中提取待处理任务，并根据所连接的至少一个任务处理端的负载情况，从所述至少一个任务处理端中选择目标任务处理端发送所提取的待处理任务，其中，所述负载情况包括任务的历史处理速率，所述目标任务处理端为至少一个任务处理端中任务的历史处理速 率高的任务处理端；

任务处理端，用于接收所述任务分发端发送的待处理任务，启动所接收的待处理任务的任务执行进程，并且启动对所述任务执行进程进行监控的监控进程，以及将所述监控进程所生成的监控信息发送给所述任务分发端，所述监控进程是实时监控所述任务执行进程状况的进程，所述监控信息包括所述任务处理端的实时负载情况和任务执行进程信息；

所述任务处理端还用于响应于所述任务执行进程的异常终止，向所述任务分发端发送所述监控进程所生成的监控信息；

所述任务分发端还用于接收所述监控信息，并保存所述任务执行进程信息；

所述任务处理端还用于在接收到所述任务分发端发送的所述任务执行进程信息之后，使用接收到的所述任务执行进程信息，根据所述任务执行进程信息对应的实际情况重新启动任务执行进程。

2.根据权利要求1所述的分布式任务处理系统，其特征在于，

所述任务分发端还用于根据所述监控信息，确定所述待处理任务是否完成，并且在确定所述待处理任务已完成的情况下，根据所述监控信息生成任务处理结果。

3.根据权利要求1-2之一所述的分布式任务处理系统，其特征在于，

所述负载情况包括以下至少一项：任务处理端的内存占用率、网络速率。

4.一种分布式任务处理方法，其特征在于，所述方法包括：

基于每个待处理任务对应的锁从加锁数据库存储的待处理任务队列中提取待处理任务；

根据所连接的至少一个任务处理端的负载情况，从所述至少一个任务处理端中选择目标任务处理端发送所提取的待处理任务，以供所述目标任务处理端在接收到待处理任务后，启动所接收的待处理任务的任务执行进程，并且启动对所述任务执行进程进行监控的监控进程，以及返回所述监控进程所生成的监控信息，其中，所述负载情况包括任务的历史处理速率，所述目标任务处理端为至少一个任务处理端中任务的历史处理速 率高的任务处理端，所述监控进程是实时监控所述任务执行进程状况的进程，所述监控信息包括所述任务处理端的实时负载情况和任务执行进程信息；

根据所述监控信息生成所述所提取的待处理任务的处理结果；

接收监控信息，其中，所述监控信息是所述目标任务处理端响应于所述任务执行进程的异常终止而发送的所述监控进程生成的监控信息；

响应于接收到所述监控信息，保存所述任务执行进程信息；

发送所述任务执行进程信息给所述目标任务处理端，以供所述目标任务处理端使用接收到的所述任务执行进程信息，根据所述任务执行进程信息对应的实际情况重新启动任务执行进程。

5.根据权利要求4所述的分布式任务处理方法，其特征在于，所述根据所述监控信息生成所述所提取的待处理任务的处理结果，包括：

根据所述监控信息，确定所述待处理任务是否完成，并且在确定所述待处理任务已完成的情况下，根据所述监控信息生成任务处理结果。

6.根据权利要求4所述的分布式任务处理方法，其特征在于，

所述负载情况包括以下至少一项：任务处理端的内存占用率、网络速率。