[发明专利]一种任务调度方法及装置

说明书

本发明公开了一种任务调度方法及装置，该方法应用于任务调度系统，包括：对各个项目对应的目标调度资源中各个任务执行定时触发，将所述各个任务定时触发后所对应的执行信息生成执行记录，并将所述执行记录记录于数据库中本地消息列表；查询所述本地消息列表中各个任务对应的执行状态信息，得到查询结果；当基于查询结果确定所述本地消息列表中存在待下发的任务时，将所述待下发的任务发布到所述各个项目对应的同名消息队列中；当确定所述待下发的任务已发布至所述同名消息队列，将所述执行记录中所述待下发的任务的执行状态更新为已下发，以及，当确定所述本地消息列表中的所有任务的执行状态更新为已下发，则确定任务调度完成。

技术领域

本发明涉及计算机应用技术领域，尤其涉及一种任务调度方法及装置。

背景技术

在大数据平台中，经常会定时运行一些业务，例如定时从数据库将新增数据导入到大数据平台，将大数据平台处理后的数据导出到数据库或者是文件系统。具体的，任务调度是指基于给定的时间点，给定的时间间隔或者给定执行次数自动的执行任务。因此在大数据平台中，任务调度起着至关重要的作用。

目前，当对项目进行任务调度时，由于运行任务的调度资源存在上限，即当运行任务达到一定个数后，需要通过资源队列进行排队，而在任务下发至消息队列前，一旦任务调度中心宕机重启或服务器网络超时，可能导致未下发的任务丢失。

发明内容

本发明实施例提供一种任务调度方法及装置，用于解决现有技术中任务易丢失的技术问题。

第一方面，提供一种任务调度方法，应用于任务调度系统，该方法至少包括：

对各个项目对应的目标调度资源中各个任务执行定时触发，将所述各个任务定时触发后所对应的执行信息生成执行记录，并将所述执行记录记录于数据库中本地消息列表；其中，所述执行记录至少包括代码备份信息以及任务的执行状态信息；

查询所述本地消息列表中各个任务对应的执行状态信息，得到查询结果；其中，所述执行状态信息用于指示任一所述任务是否已下发；

当基于查询结果确定所述本地消息列表中存在待下发的任务时，将所述待下发的任务发布到所述各个项目对应的同名消息队列中；

当确定所述待下发的任务已发布至所述同名消息队列，将所述执行记录中所述待下发的任务的执行状态更新为已下发，以及，当确定所述本地消息列表中的所有任务的执行状态更新为已下发，则确定任务调度完成。

在一种可能的实施方式中，在对各个项目对应的目标调度资源中各个任务执行定时触发之前，所述方法还包括：

接收申请第一项目对应的调度资源的第一请求，所述第一请求中携带有第一项目的项目类型；

基于所述项目类型和预设分配规则，确定所述第一项目对应的目标调度资源。

在一种可能的实施方式中，查询所述数据库中本地消息列表中各个任务对应的执行状态信息，包括：

确定预设查询周期；

当确定当前时刻处于所述预设查询周期时，查询所述数据库中本地消息列表中各个任务对应的执行状态信息；

基于所述各个任务对应的执行状态信息，获得查询结果；其中，所述查询结果包括待下发的任务的个数和已下发但未结束的任务的个数。

在一种可能的实施方式中，所述方法还包括：

当所述执行记录中任一任务的执行状态更新为已下发后，将所述本地消息列表中所述任一任务对应的记录删除。

在一种可能的实施方式中，在查询所述数据库中本地消息列表中的待下发任务的个数之后，所述方法还包括：