[发明专利]批量任务处理方法、装置、计算机设备和存储介质

说明书

本申请涉及一种批量任务处理方法、装置、计算机设备和存储介质。所述方法包括：获取批量任务的配置文件；配置文件中记录了批量任务的任务标识、任务类型以及与任务类型相对应的任务参数；创建与任务标识对应的缓存空间；将根据任务类型以及与任务类型相对应的任务参数从数据库中拉取的目标数据存储至缓存空间；基于缓存空间存储的目标数据进行批量任务的处理；在批量任务的处理完毕时，释放任务标识对应的缓存空间。采用本方法能够提升批量任务的处理效率。

技术领域

本申请涉及计算机技术领域，特别是涉及一种批量任务处理方法、装置、计算机设备和存储介质。

背景技术

随着大数据时代的到来，应用系统所需要处理的任务数量也越来越多。当需要对某种任务进行批量处理时，在业务处理过程中针对每个操作对象都需要访问一次或多次数据库来加载数据，如当需要基于物料管理模块对多种物料的库存信息进行批量统计时，就需要频繁访问数据库，从而增加了中央处理器消耗和磁盘输入/输出消耗，降低了系统的整体服务性能，进而使得批量任务处理效率低。

发明内容

基于此，有必要针对上述技术问题，提供一种能够提升批量任务处理效率的批量任务处理方法、装置、计算机设备和存储介质。

一种批量任务处理方法，所述方法包括：

获取批量任务的配置文件；所述配置文件中记录了批量任务的任务标识、任务类型以及与任务类型相对应的任务参数；

创建与所述任务标识对应的缓存空间；

将根据所述任务类型以及与任务类型相对应的任务参数从数据库中拉取的目标数据存储至所述缓存空间；

基于所述缓存空间存储的目标数据进行所述批量任务的处理；

在所述批量任务的处理完毕时，释放所述任务标识对应的缓存空间。

在其中一个实施例中，所述创建与所述任务标识对应的缓存空间包括：

判断是否存在与所述任务标识对应缓存空间；

当不存在时，创建与所述任务标识对应的缓存空间。

在其中一个实施例中，所述将根据所述任务类型以及与任务类型相对应的任务参数从数据库中拉取的目标数据存储至所述缓存空间包括：

根据所述任务参数确定数据筛选关键词以及目标数据库；

基于所述数据筛选关键词以及任务类型从所述目标数据库中拉取目标数据；

将所述目标数据存储至所述缓存空间。

在其中一个实施例中，所述配置文件中记录了与批量任务关联的关联任务的任务类型；所述基于所述数据筛选关键词以及任务类型从所述目标数据库中拉取目标数据包括：

基于所述配置文件确定与所述批量任务关联的关联任务的任务类型；

根据所述关联任务的任务类型调整所述数据筛选关键词以及目标数据库；

基于所述重新调整后的数据筛选关键词、批量任务的任务类型以及关联任务的任务类型从目标数据库中拉取目标数据。

在其中一个实施例中，所述配置文件中记录了批量任务与关联任务的依赖关系；所述批量任务包括至少一个子任务；所述关联任务包括至少一个子关联任务；所述子任务的处理依赖于与子任务关联的子关联任务的处理结果；所述方法还包括：

获取执行子任务以及子关联任务中至少一个任务时触发的数据查询请求；

判断所述缓存空间所存储的目标数据中是否存在响应所述数据查询请求所需的响应数据；

当不存在所述响应数据时，基于所述数据查询请求从所述数据库中拉取对应的响应数据；