[发明专利]大数据集的任务队列优先级的调度管理方法

摘要

一种大数据集的任务队列优先级的调度管理方法，在任务获取端的每一个节点运行获取任务的循环线程，根据队列的优先级从不同的队列获取任务，它可以优先从高优先级的队列中获取任务，同时也要兼顾低优先级的任务不会被高优先级阻塞。队列服务本身可以支持多个多种类型的队列，每个队列可以分别设定其优先级，根据运行记录可以获取某个队列的平均运行时间。根据任务优先级、队列长度、队列的平均运行时间、每次获取的最大任务数等多个条件来动态调整从各个队列中获取的任务数量，合理调度任务，防止资源浪费。

主权项

一种大数据集的任务队列优先级的调度管理方法，其特征在于：在任务获取端的每一个节点运行获取任务的循环线程，循环线程包括以下步骤：A、线程开始，取得任务队列；B、通过执行引擎运行不同算法，计算各队列获取的任务数量；C、从任务队列中获取任务；D、执行任务；E、任务完成后判断线程是否停止，循环至步骤A，重新取得任务队列。