[发明专利]面向云计算任务资源的预测关联迭代调配方法与系统

说明书

本发明提供了一种面向云计算任务资源的预测关联迭代调配方法，其中，所述预测关联迭代调配方法包括：步骤1，根据资源调配模式分配的资源，按照若干个子任务以及所述子任务彼此串行和/或并行结构关系，进行所述子任务的执行操作；步骤2，通过所述子任务执行过程中的任务执行状态和资源消耗状态进行动态优化调配资源，以及控制所述子任务的执行过程，以此来避免触发事件机制和优化评价机制的任务场景评价分值；步骤3，通过在所述子任务执行过程中分阶段的进行所述子任务的总体预测，来实现资源调配的总体优化。本发明能够避免资源的再次调配，能够维持总体上的优化匹配，保障了每个阶段子任务的执行过程及其中资源分配的优化。

技术领域

本发明涉及资源调配技术领域，特别涉及一种面向云计算任务资源的预测关联迭代调配方法与系统。

背景技术

为了适应大数据和人工智能等分析运算的实际需求，云计算技术近年来得到迅速发展。云计算是利用位于云端的服务器集群作为分析运算的执行载体，服务器集群通过网络获得客户端提交的分析运算任务，并通过响应该分析运算任务的需求执行计算，来向客户端反馈分析运算任务的计算执行结果。

云计算利用了云端服务器集群的规模优势和集中管理优势，可以承担海量、高并发和资源消耗大的运算，并且降低了运算的总体成本；简化了客户端的配置和成本。

但是，云计算的服务器集群也面临着海量的任务，需要以尽可能优化的方案对服务器集群的资源进行调配，以与各个任务的需求相匹配。而且，任务执行过程中因为各种因素的影响以及任务自身的特点，存在比较明显的动态不确定性，因此，任务与资源的优化匹配关系是不稳定的，往往运行一段时间就会被打破，造成需要频繁地调配资源，但资源调配本身是一种资源的消耗，其过于反复，过于频繁，都会明显影响云计算的执行。

本发明提供了一种面向云计算任务资源的预测关联迭代调配方法与系统。能够避免过于频繁的资源调配，能够维持总体上的优化匹配，且保障了每个阶段子任务的执行过程及其中资源分配的优化。

发明内容

为克服上述现有技术存在的至少一种缺陷，本发明提供了一种面向云计算任务资源的预测关联迭代调配方法与系统，能够避免过于频繁的资源调配，能够维持总体上的优化匹配，且保障了每个阶段子任务的执行过程及其中资源分配的优化。

作为本发明的第一方面，本发明公开了一种面向云计算任务资源的预测关联迭代调配方法，包括以下步骤：

步骤1，根据资源调配模式分配的资源，按照若干个子任务以及所述子任务彼此串行和/或并行结构关系，进行所述子任务的执行操作；

步骤2，通过所述子任务执行过程中的任务执行状态和资源消耗状态进行动态优化调配资源，以及控制所述子任务的执行过程，以此来避免触发事件机制和优化评价机制的任务场景评价分值；

步骤3，通过在所述子任务执行过程中分阶段的进行所述子任务的总体预测，来实现资源调配的总体优化。

一种可能的实施方式中，在所述步骤2中，所述避免触发事件机制包括：

当所述子任务的进程延迟接近预设的延迟阈值，则通过加大该子任务的资源分配量来降低所述子任务的进程延迟；

当所述子任务调取或者产生的数据量接近超出数据量阈值，则通过挂起该子任务来暂停所述子任务调取或者产生的数据量的持续增大；

当服务器的可用处理器计算能力、临时内存空间量、数据存储空间接近低于告警阈值，则挂起部分所述子任务以释放资源，或者收回部分所述子任务的资源。

一种可能的实施方式中，在所述步骤2中，所述优化评价机制的任务场景评价分值包括：

通过调控所述子任务的执行过程，适当挂起或者恢复执行所述子任务以及调配资源，使得所述任务场景评价分值避免进入需要再次分配的区间。