[发明专利]资源调度方法、装置、系统及电子设备

说明书

本发明实施例提供一种资源调度方法、装置、系统及电子设备，其中，方法包括：接收用户提交的作业；针对所述用户提交的作业，从公共资源池中申请资源以创建该作业对应的计算资源，以在所述计算资源中处理该作业；当所述计算资源中的作业被处理完成后，释放该计算资源至所述公共资源池。本发明实施例的方案，能够以作业粒度弹性申请和释放资源，以实现对资源的合理调度，避免出现资源紧张或者空闲的情况。

技术领域

本申请涉及计算机领域，尤其涉及一种资源调度方法、装置、系统及电子设备。

背景技术

目前，在分布式计算方面，很多企业会先从云资源提供商购买一批虚拟机作为服务资源，手动搭建如yarn、mesos等资源调度框架，然后在该资源调度框架之上运行如spark、hadoop等分布式计算框架。

但是，这种方法存在以下缺点：用户在运行一个分布式计算框架之前，首先需要规划资源、然后做集群搭建、之后才能运行作业；当在某个时段，运行的作业比较少时，整个集群的资源会浪费很多；当出现业务峰值时，集群资源难以满足需要，扩容会很慢；另外，由于一个集群中的计算服务只能处于一个VPC网络环境中，如果不同作业需要访问的外部服务属于不同的VPC网络则将出现无法满足的情况。

发明内容

本发明提供了一种资源调度方法、装置、系统及电子设备、能够以作业粒度弹性申请和释放资源，以实现对资源的合理调度，避免出现资源紧张或者空闲的情况。

为达到上述目的，本发明的实施例采用如下技术方案：

第一方面，提供了一种资源调度方法，包括：

接收用户提交的作业；

针对所述用户提交的作业，从公共资源池中申请资源以创建该作业对应的计算资源，以在所述计算资源中处理该作业；

当所述计算资源中的作业被处理完成后，释放该计算资源至所述公共资源池。

第二方面，提供了一种资源调度装置，包括：

作业接收模块，用于接收用户提交的作业；

计算资源创建模块，用于针对所述用户提交的作业，从公共资源池中申请资源以创建该作业对应的计算资源，以在所述计算资源中处理该作业；

计算资源释放模块，用于当所述计算资源中的作业被处理完成后，释放该计算资源至所述公共资源池。

第三方面，提供了一种电子设备，包括：

存储器，用于存储程序；

处理器，耦合至所述存储器，用于执行所述程序，所述程序运行时执行本发明提供的所述的资源调度方法。

第四方面，提供了一种资源调度系统，包括：对外交互平台、管控组件、服务组件以及资源组件，所述管控组件通过所述对外交互平台向用户提供账号身份信息以及校验证书；其中，

所述管控组件，用于通过所述服务组件接收用户提交的作业；针对所述用户提交的作业，调用所述资源组件从公共资源池中申请资源以创建该作业对应的计算资源，以在所述计算资源中处理该作业；

当所述计算资源中的作业被处理完成后，所述管控组件调用所述资源组件释放该计算资源至所述公共资源池。

本发明提供的资源调度方法、装置、系统及电子设备，通过在接收用户提交的作业后，针对该作业，从公共资源池中申请资源以创建该作业对应的计算资源，以在计算资源中处理该作业；当计算资源中的作业被处理完成后，释放该计算资源至公共资源池，从而通过作业粒度的资源创建和释放对用户作业所需资源进行灵活调度。

本方案中，由于采用了根据用户提交具体的作业，自动弹性在云上的公共资源池申请资源，即计算资源，因此不需要用户提前规划集群，节省了用户的搭建资源调度架构的成本。