[发明专利]一种资源调度方法、装置及计算机设备

摘要

本申请涉及一种资源调度方法、装置及计算机设备，该方法针对待处理的第一任务，在基于申请到的资源为其构建多个计算单元后，进一步将各计算单元处理为至少包括静态与动态两种类型，之后针对第一任务的数据存储需求，利用静态计算单元的资源来存储数据，而针对第一任务空闲时的资源释放需求，则释放掉至少部分动态计算单元及其资源。由此，本申请通过将第一任务的计算单元处理为静态与动态两种类型，并区别化地、有选择性地利用静态计算单元的资源进行数据存储、利用动态计算单元及其资源参与资源释放，实现了在保证缓存(或持久化)数据完整的情况下，对计算资源进行动态管理，可有效缓解Spark等计算平台中计算性能与资源占用相矛盾的问题。

主权项

1.一种资源调度方法，包括：获得待处理的第一任务；确定处理所述第一任务所需的计算单元的第一数量；申请第一数量的计算单元所对应的资源；基于申请到的资源构建第一数量的计算单元；将所述第一数量的计算单元处理为至少包括静态类型与动态类型两种计算单元；利用第一数量计算单元中的至少部分计算单元处理所述第一任务；其中，若所述第一任务需存储待重用的数据，则利用静态类型的计算单元对应的资源进行待重用数据的存储；若所述第一任务进入符合第一条件的空闲状态，则释放至少部分动态类型的计算单元及其对应的资源。