[发明专利]任务分发处理方法、系统、计算机设备和存储介质

权利要求书

1.一种任务分发处理方法，所述方法包括：

通过Tornado框架的Web服务器接收到任务请求时，根据所述任务请求使用所述Tornado框架的Web服务器生成多异步任务；

使用所述Tornado框架的Web服务器将所述多异步任务下发到Celery系统；

使用所述Celery系统对所述多异步任务进行任务分配并对分配后的任务进行任务处理，所述Celery系统使用分布式任务队列Celery机制对所述多异步任务进行任务分配以及对分配后的任务进行任务处理；

对所述Tornado框架的Web服务器生成的所述多异步任务进行可视化任务监控，以及对所述Celery系统的任务处理进行可视化任务监控；

其中，所述对所述Tornado框架的Web服务器生成的所述多异步任务进行可视化任务监控，包括：

获取所述Tornado框架的Web服务器生成的各异步任务；

获取预设可视化任务发起页面，所述可视化任务发起页面中包含有任务字段信息；

通过所述预设可视化任务发起页面的任务字段信息显示所述Tornado框架的Web服务器生成的各异步任务；

所述方法还包括：

当通过所述可视化任务发起页面接收到任务发起指令时，使用所述Tornado框架的Web服务器将所述可视化任务发起页面中显示的各异步任务下发到所述Celery系统。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述Celery系统对所述可视化任务发起页面中显示的各异步任务的任务处理信息；

获取预设可视化任务监控页面；

通过所述预设可视化任务监控页面显示所述各异步任务的任务处理信息。

3.根据权利要求1所述的方法，其特征在于，所述Celery系统包括多个工作节点，各工作节点用于对分配到的任务进行任务处理，所述对所述Celery系统的任务处理进行可视化任务监控，包括：

当监测到所述Tornado框架的Web服务器向所述Celery系统下发目标异步任务时，确认所述目标异步任务对应的目标工作节点，获取所述目标工作节点处理所述目标异步任务的工作状态信息；

获取预设可视化节点监控页面；

通过所述预设可视化节点监控页面显示所述目标工作节点的工作状态信息。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

获取所述目标工作节点处理所述目标异步任务的任务处理信息；

获取预设可视化节点监控页面；

通过所述预设可视化节点监控页面显示所述目标工作节点处理所述目标异步任务的任务处理信息。

5.根据权利要求3所述的方法，其特征在于，所述方法还包括：

确定所述多个工作节点的第一操作系统和第二操作系统；

根据所述分布式任务队列Celery机制对所述第一操作系统设置第一操作命令，以使得所述第一操作系统对应的第一工作节点根据所述第一操作命令执行任务处理；

根据所述分布式任务队列Celery机制对所述第二操作系统设置第二操作命令，以使得所述第二操作系统对应的第二工作节点根据所述第二操作命令执行任务处理。

6.根据权利要求1所述的方法，其特征在于，所述Celery系统使用分布式任务队列Celery机制对所述多异步任务进行任务分配以及对分配后的任务进行任务处理，包括：

所述Celery系统根据所述分布式任务队列Celery机制采用公平调度算法对所述多异步任务进行任务分配；

所述Celery系统根据所述分布式任务队列Celery机制采用生产者-消费者模式对分配后的任务进行任务传输，以对传输后的任务进行任务处理。