[发明专利]管理任务的方法、装置及系统

权利要求书

1.一种管理任务的方法，其特征在于，包括：

调度器接收客户端发送的任务计划描述，所述任务计划描述包括任务计划的输入信息、组成所述任务计划的任务节点对应的资源信息以及所述组成所述任务计划的任务节点之间的依赖关系；

所述调度器根据所述依赖关系以及预先设置的策略从任务执行集群中选取目标服务器，将当前可执行的任务节点对应的资源信息发送给所述目标服务器；

所述目标服务器根据所述当前可执行的任务节点对应的资源信息从分布式存储子系统中获取所述资源信息对应的资源并根据所述资源生成输出文件，所述资源包括程序资源和数据资源；

所述目标服务器将所述输出文件发送给所述分布式存储子系统，并将所述输出文件对应的输出资源信息通过所述调度器发送给数据库；

当组成所述任务计划的任务节点都执行完成，客户端从所述数据库中查询需要的输出文件对应的输出资源信息，根据所述输出资源信息从所述分布式存储子系统中下载客户端需要的输出文件。

2.根据权利要求1所述的方法，其特征在于，在所述调度器接收客户端发送的任务计划描述之前，还包括：

客户端从数据库中查询得到相应的资源信息，根据所述资源信息生成任务计划描述，所述相应的资源信息包括任务计划需要有序执行的程序对应的程序资源信息和以及所述程序需要输入的数据对应的数据资源信息。

3.根据权利要求2所述的方法，其特征在于，所述根据所述资源信息生成任务计划描述，包括：

根据所述资源信息生成对应的任务节点图；

获取每个任务节点图之间的依赖关系，根据所述任务节点图和每个任务节点图之间的依赖关系生成任务计划图；

根据所述任务计划图生成任务描述，所述任务计划描述为所述调度器能够识别的机器语言。

4.根据权利要求1-3任一项所述的方法，其特征在于，所述调度器根据所述依赖关系以及预先设置的策略从任务执行集群中选取目标服务器之后，还包括：

所述调度器实时监测所述目标服务器的工作状态；

若所述目标服务器返回失败信息或者在预先设置的时间内未收到所述目标服务器反馈的状态信息，所述调度器根据所述依赖关系以及预先设置的策略从任务执行集群中重新选取目标服务器；

重新选取的目标服务器根据所述程序资源和所述数据资源生成输出文件，并将所述输出文件发送给所述分布式存储子系统，将所述输出文件对应的输出资源信息通过所述调度器发送给数据库。

5.根据权利要求1-3任一项所述的方法，其特征在于，在调度器接收客户端发送的任务计划描述之后，还包括：

所述调度器将所述任务计划描述以及所述任务计划描述对应的任务资源信息发送给所述数据库，以使得客户端在下一次需要使用所述任务计划或与所述任务计划相似的任务计划时从所述数据库中查询得到相应的任务计划描述。

6.一种调度器，其特征在于，包括：

接收单元，用于接收客户端发送的任务计划描述，所述任务计划描述包括任务计划的输入信息、组成所述任务计划的任务节点对应的资源信息以及所述组成所述任务计划的任务节点之间的依赖关系；

调度单元，用于根据所述依赖关系以及预先设置的策略从任务执行集群中选取目标服务器，将当前可执行的任务节点对应的资源信息发送给所述目标服务器；

传输单元，用于接收所述目标服务器发送的输出文件对应的输出资源信息，并将所述输出资源信息发送给数据库。

7.根据权利要求6所述的调度器，其特征在于，还包括：

监测单元，用于实时监测所述目标服务器的工作状态；

所述调度单元，还用于若所述监测单元监测到目标服务器返回失败信息或者监测单元在在预先设置的时间内未收到所述目标服务器反馈的状态信息，根据所述依赖关系以及预先设置的策略从任务执行集群中重新选取目标服务器；

所述传输单元，还用于接收所述重新选择的目标服务器发送的传输文件对应的输出资源信息，并将所述传输资源信息发送给所述数据库。

8.根据权利要求6或7所述的调度器，其特征在于，还包括：

发送单元，用于将所述任务计划描述以及所述任务计划描述对应的任务资源信息发送给所述数据库。