[发明专利]一种集群任务调度方法、装置、计算机设备及存储介质

说明书

本公开提供了一种集群任务调度方法、装置、计算机设备及存储介质，其中，该方法包括：获取针对待分配任务的多个分配策略；针对多个分配策略中的每个分配策略，确定在每个分配策略下集群中的各个设备各自的状态信息；基于每个分配策略下集群中各个设备各自的状态信息，通过预训练的任务执行耗时预测模型，预测各个设备处理完成在该分配策略下所承接任务的预期耗时；根据每个分配策略下的各个设备处理完成在该分配策略下所承接任务的预期耗时，从多个分配策略中选择出预期耗时符合预设条件的分配策略作为待分配任务对应的目标分配策略；基于目标分配策略将待分配任务分配给目标分配策略下的指定设备。

技术领域

本公开涉及计算机技术领域，具体而言，涉及一种集群任务调度方法、装置、计算机设备及存储介质。

背景技术

通过由多个处理设备组成的服务器集群，可以接收和执行多个任务，为了提高任务处理效率，需要对各个任务进行合理分配，提高任务处理效率和集群资源利用率。

一般地，在分配处理任务时，会选择当前剩余的处理器等资源较多的处理设备，这种分配方式存在一定程度上的片面性，无法保证集群整体上对各个处理任务的处理效率。

发明内容

本公开实施例至少提供一种集群任务调度方法、装置、计算机设备及存储介质。

第一方面，本公开实施例提供了一种集群任务调度方法，包括：

获取针对待分配任务的多个分配策略；所述分配策略用于指示将所述待分配任务分配至集群中的指定设备，不同的所述分配策略下的指定设备不同；

针对所述多个分配策略中的每个分配策略，确定在每个所述分配策略下所述集群中的各个设备各自的状态信息；

基于每个所述分配策略下所述集群中各个设备各自的状态信息，通过预训练的任务执行耗时预测模型，预测所述各个设备处理完成在该分配策略下所承接任务的预期耗时；

根据每个所述分配策略下的各个设备处理完成在该分配策略下所承接任务的预期耗时，从多个分配策略中选择出预期耗时符合预设条件的分配策略作为所述待分配任务对应的目标分配策略；

基于所述目标分配策略将所述待分配任务分配给所述目标分配策略下的指定设备。

一种可能的实施方式中，在每个所述分配策略下的各指定设备各自的状态信息包括：

指定设备在所述分配策略下所承接任务的任务类型、任务执行进度以及指定设备的资源占用程度。

一种可能的实施方式中，所述状态信息还包括以下信息中的任意一种：

硬盘利用率、网络信息、用户交互信息。

一种可能的实施方式中，所述基于每个所述分配策略下所述集群中各个设备各自的状态信息，通过预训练的任务执行耗时预测模型，预测所述各个设备处理完成在该分配策略下所承接任务的预期耗时，包括：

针对每个分配策略，基于该分配策略下所述集群中各个设备各自的状态信息，生成与该分配策略对应的状态矩阵；

将每个分配策略对应的所述状态矩阵输入到所述任务执行耗时预测模型，得到所述各个设备处理完成在该分配策略下所承接任务的预期耗时。

一种可能的实施方式中，所述针对每个分配策略，基于该分配策略下所述集群中各个设备各自的状态信息，生成与该分配策略对应的状态矩阵，包括：

针对每个分配策略，基于该分配策略下所述集群中各个设备各自的状态信息，以及每一个状态信息对应的排列方法，将该分配策略下各个设备的状态信息进行排列，生成该分配策略对应的状态矩阵。