[发明专利]任务处理方法、装置、电子设备及计算机可读存储介质

说明书

本发明实施例提供了一种任务处理方法、装置、电子设备及计算机可读存储介质，该方法包括：若接收到第二服务器发送的目标调度命令，获取待处理文件和子任务集群；其中，所述子任务集群中包括针对所述待处理文件的待处理任务的至少两个相关的子任务，所述目标调度命令用于指示第一服务器为子任务集群创建容器组合；为所述子任务集群创建容器组合；其中，所述容器组合包括所述子任务集群中每个子任务对应的容器，所述容器中容纳有实现子任务的推理模型的镜像文件；若运行所述容器组合中每个容器的镜像文件可实现对所述待处理文件进行任务处理。本发明实施例在处理由多个子任务组合而成的任务时，能够节省资源，提高任务处理效率。

技术领域

本发明涉及云计算技术领域，特别是涉及一种任务处理方法、装置、电子设备及计算机可读存储介质。

背景技术

当前，创建了很多人工智能(Artificial Intelligence，AI)推理模型，这些AI推理模型都是基于单个任务单独创建的，比如文本检测的AI推理模型只能处理文本检测的任务，图像识别的AI推理模型只能处理图像识别的任务。若要处理由多个任务组合而成的任务，比如，处理既有文本又有图像的多媒体文件的检测任务，需要重新创建一个新的AI推理模型，比如，对该多媒体文件的内容从头开始训练，得到一个端到端的AI推理模型，这样，不仅效率太低，而且也浪费资源。

针对上述缺陷，可以对AI推理模型采用特定的部署方式来解决，比如，将不同的AI推理模型部署于不同的web服务，如果多媒体文件的检测任务中包括多个任务，则调用多个web服务。然而，在调用时，基于这些web服务均需要重复下载此多媒体文件；而且，需要做很多重复工作，例如数据准备和向量化等。

因此，采用将不同的AI推理模型部署于不同的web服务的方式，来处理由多个任务组合而成的任务，现有技术中存在资源浪费和任务处理效率比较低下的问题。

发明内容

本发明实施例的目的在于提供一种任务处理方法、装置、电子设备及计算机可读存储介质，以实现在处理由多个子任务组合而成的任务时，达到节省资源和提高任务处理效率的目的。具体技术方案如下：

在本发明实施的第一方面，首先提供了一种任务处理方法，应用于第一服务器，所述方法包括：

若接收到第二服务器发送的目标调度命令，获取待处理文件和子任务集群；其中，所述子任务集群中包括针对所述待处理文件的待处理任务的至少两个相关的子任务，所述目标调度命令用于指示第一服务器为子任务集群创建容器组合；

为所述子任务集群创建容器组合；其中，所述容器组合包括所述子任务集群中每个子任务对应的容器，所述容器中容纳有实现子任务的推理模型的镜像文件；若运行所述容器组合中每个容器的镜像文件可实现对所述待处理文件进行任务处理。

在本发明实施的第二方面，还提供了一种任务处理方法，应用于第二服务器，所述方法包括：

获取针对待处理文件的待处理任务的子任务集群，所述子任务集群中包括所述待处理任务的至少两个相关的子任务；

基于所述子任务集群，生成目标调度命令；其中，所述目标调度命令用于指示第一服务器为所述子任务集群创建容器组合，所述容器组合包括所述子任务集群中每个子任务对应的容器，所述容器中容纳有实现子任务的推理模型的镜像文件，若运行所述容器组合中每个容器的镜像文件可实现对所述待处理文件进行任务处理；

将所述目标调度命令发送给所述第一服务器。

在本发明实施的第三方面，还提供了一种任务处理方法，应用于第一服务器，所述方法包括：

获取待处理文件的子任务集群对应的容器组合；其中，所述子任务集群中包括所述待处理文件的待处理任务的至少两个相关的子任务，所述容器组合包括所述子任务集群中每个子任务对应的容器，所述容器中容纳有实现子任务的推理模型的镜像文件：