[发明专利]一种调度方法及管理系统

说明书

本发明实施例提供一种调度方法及管理系统，用于解决现有技术中资源管理系统的资源调度能力较差的技术问题。该方法包括：确定存在用户进行的用于设置与当前数据任务相关的调度计划的第一操作；响应第一操作，通过显示界面显示与当前数据任务相关的至少一个度量信息；其中，至少一个度量信息中包括用户设置的针对当前数据任务在执行过程中的资源要求和限制条件，资源要求用于指示对服务器的硬件资源的要求，限制条件用于指示对服务器的运行要求；基于至少一个度量信息，确定与当前数据任务对应的调度计划；基于调度计划进行资源调度，确定与当前数据任务对应的至少一个目标服务器，至少一个目标服务器能够满足资源要求及限制条件。

技术领域

本发明涉及通信技术领域，特别涉及一种调度方法及管理系统。

背景技术

当前的大数据生态系统中，需求变得越来越复杂，传统的Map-Reduce(一种编程模型)计算任务已经不再适合所有需求，因此在Hadoop 2.0(一种分布式系统基础架构)或YARN(一种新的Hadoop资源管理系统)中，计算任务的类型可以由用户自己定义，在Spark(一种与Hadoop相似的开源集群计算环境)中，计算任务的流程更有弹性。此外，随着集群规模的不断增长，异构资源被用来运行大数据工作负载，包括open power、x86、SolarisSparc等等。在目前的资源管理环境(如YARN，MESOS等)中，大数据计算任务在运行时资源、环境和任务限制条件上可能有多种要求。

但目前，主要应用的大数据资源管理软件(如YARN和Mesos等)不能以更灵活的模式来对计算任务进行调度，虽然YARN可以支持多个维度(如CPU、内存、硬盘等)，但不能支持更复杂的需求。比如，它不能支持更多的调度限制条件(如操作系统类型等)以及运行时的调度限制条件(如“在上一台主机上运行这个任务”)等，且它的调度器的可配置项目是固定不变的，用户不能在真实的生产环境中扩展或者定制化调度限制条件，调度配置过程不方便，从可能在进行资源调度过程中可能无法确定到最合适的服务器执行任务，甚至造成对资源的消耗。

综上可知，现有技术中资源管理系统存在对资源调度能力较差的技术问题。

发明内容

本发明实施例提供一种调度方法及管理系统，用于解决现有技术中资源管理系统的资源调度能力较差的技术问题。

第一方面，本发明实施提供一种调度方法，包括：

确定存在用户进行的用于设置与当前数据任务相关的调度计划的第一操作；

响应所述第一操作，通过显示界面显示与所述当前数据任务相关的至少一个度量信息；其中，所述至少一个度量信息中包括用户设置的针对所述当前数据任务在执行过程中的资源要求和限制条件，所述资源要求用于指示对服务器的硬件资源的要求，所述限制条件用于指示对服务器的运行要求；

基于所述至少一个度量信息，确定与所述当前数据任务对应的调度计划；

基于所述调度计划进行资源调度，确定与所述当前数据任务对应的至少一个目标服务器，所述至少一个目标服务器能够满足所述资源要求及所述限制条件。

可选的，在确定所述管理系统的显示界面中存在用户进行的用于设置与当前数据任务相关的调度计划的用户操作之前，所述方法还包括：

获取用户针对所述管理系统中资源度量收集器的新增资源度量的新增度量信息，所述资源度量收集器用于收集相应服务器的多项资源度量和每项资源度量对应的度量参数；

及，获取所述用户通过所述管理系统中限制条件组件设置的针对执行数据任务的服务器运行的限制条件信息；

所述响应所述第一操作，通过显示界面显示与所述当前数据任务相关的至少一个度量信息，包括：

响应所述第一操作，基于所述新增度量信息及所述限制条件信息，在所述显示界面中显示所述至少一个度量信息。