[发明专利]作业处理方法、装置、设备及存储介质

说明书

本申请提供一种作业处理方法、装置、设备及存储介质，可用于分布式领域或其他领域。该方法包括从作业系统获取作业处理请求，所述作业处理请求中包括待处理作业、以及所述待处理作业的作业标识；根据所述作业处理请求，确定数据库中是否存在所述待处理作业的历史作业信息，所述历史作业信息包括所述待处理作业的作业状态，所述作业状态为执行状态或者已完成状态；若数据库中不存在所述历史作业信息，则根据所述作业处理请求对所述待处理作业进行处理；若数据库中存在所述历史作业信息，则在所述作业状态为执行状态时，根据所述作业处理请求对所述待处理作业进行处理。通过上述方法，提高了作业处理系统的可靠性。

技术领域

本申请涉及分布式领域或其他领域，尤其涉及一种作业处理方法、装置、设备及存储介质。

背景技术

作业处理系统中的计算节点可以动态增减。例如，若运行过程中有计算节点宕机，可以从作业处理系统中删除该计算节点；若业务量增加，可以为作业处理系统新增计算节点。

目前，若作业处理系统中的计算节点出现宕机或其他不可抗力的故障，会导致计算节点丢失其处理的作业的信息，使得其他计算节点无法判断该作业是否被正常执行。这样，可能出现作业被重复执行的情况，导致作业处理系统出现业务逻辑错误，使得作业处理系统的可靠性较差。

发明内容

本申请提供一种作业处理方法、装置、设备及存储介质，所述方法可以提高分布式集群的作业处理效率。

第一方面，本申请提供一种作业处理方法，包括：

从作业系统获取作业处理请求，所述作业处理请求中包括待处理作业、以及所述待处理作业的作业标识；

根据所述作业处理请求，确定数据库中是否存在所述待处理作业的历史作业信息，所述历史作业信息包括所述待处理作业的作业状态，所述作业状态为执行状态或者已完成状态；

若数据库中不存在所述历史作业信息，则根据所述作业处理请求对所述待处理作业进行处理；

若数据库中存在所述历史作业信息，则在所述作业状态为执行状态时，根据所述作业处理请求对所述待处理作业进行处理。

一种可能的实现方式中，在所述作业状态为执行状态时，根据所述作业处理请求对所述待处理作业进行处理，包括：

获取所述待处理作业对应的心跳信息；

根据所述心跳信息和所述作业处理请求，对所述待处理作业进行处理。

一种可能的实现方式中，所述心跳信息包括初始心跳时间戳和最新心跳时间戳；根据所述心跳信息和所述作业处理请求，对所述待处理作业进行处理，包括：

获取所述最新心跳时间戳；

判断系统当前时刻与所述最新心跳时间戳之间的时长是否超过第一阈值；

若是，则根据所述作业处理请求对所述待处理作业进行处理；

若否，则根据所述初始心跳时间戳和所述作业处理请求，对所述待处理作业进行处理。

一种可能的实现方式中，所述历史作业信息中还包括所述待处理作业的作业开始时刻；根据所述初始心跳时间戳和所述作业处理请求，对所述待处理作业进行处理，包括：

获取所述初始心跳时间戳和所述作业开始时刻；

若所述初始心跳时间戳在所述作业开始时刻之后，则根据所述作业处理请求对所述待处理作业进行处理。

一种可能的实现方式中，根据所述作业处理请求，确定数据库中是否存在所述待处理作业的作业信息，包括：

在所述数据库中查找所述待处理作业的作业标识；