[发明专利]一种数据批次处理方法及装置

说明书

本说明书提供一种数据批次处理方法及装置，基于获取到的最新的批次生成规则对业务请求信息进行打批处理，并根据获取到的最新的批次捞取规则捞取生成的批次数据，将捞取到的批次数据发送至下游业务处理系统进行业务处理，实现了数据的及时处理。同时，基于下游业务处理系统的业务处理能力如：下游系统中批次数据的处理状态，不断的更新批次捞取规则，并基于更新后的批次捞取规则进行批次数据的捞取和投递，以适应下游业务处理系统的业务处理能力，避免造成数据的积压，增加下游业务处理系统的负担的问题。提高了数据处理效率，实现了数据批次灵活处理，提高了系统的稳定性。

技术领域

本说明书属于计算机技术领域，尤其涉及一种数据批次处理方法及装置。

背景技术

随着计算机和互联网技术的发展，数据量也越来越大，数据批次处理的难度也在增加。例如：在日常的业务场景中，为了匹配下游业务系统的能力，需要对请求进行异步处理，同时为了提高异步的处理能力，会对异步的请求进行分批次发送到下游业务系统。如何实现灵活的进行数据批次处理是本领域亟需解决的技术问题。

发明内容

本说明书实施例的目的在于提供一种数据批次处理方法及装置，实现了数据的批次灵活处理，提高了数据处理效率。

一方面本说明书实施例提供了一种数据批次处理方法，包括：

接收业务请求信息；

根据获取到的批次生成规则，将所述业务请求信息生成对应的批次数据，所述批次生成规则包括：批次数据生成频率、每个批次数据中包括的业务请求信息的数量；

根据获取到的批次捞取规则捞取生成的所述批次数据，将捞取到的批次数据发送给下游业务处理系统，所述批次捞取规则每隔预设时间基于所述下游业务处理系统中批次数据的处理状态进行更新，其中，所述批次捞取规则包括：批次数据捞取频率、批次数据投递频率。

另一方面，本说明书提供了一种数据批次处理装置，包括：

业务请求接收模块，用于接收业务请求信息；

批次生成模块，用于根据获取到的批次生成规则，将所述业务请求信息生成对应的批次数据，所述批次生成规则包括：批次数据生成频率、每个批次数据中包括的业务请求信息的数量；

批次投递模块，用于根据获取到的批次捞取规则捞取所述批次生成模块生成的所述批次数据，将捞取到的批次数据发送给下游业务处理系统，其中，所述批次捞取规则包括：批次数据捞取频率、批次数据投递频率；

批次计量模块，用于每隔预设时间基于所述下游业务处理系统中批次数据的处理状态进行更新。

还一方面，本说明书提供了一种数据批次处理设备，包括：至少一个处理器以及用于存储处理器可执行指令的存储器，所述处理器执行所述指令时实现上述数据批次处理方法。

本说明书提供的数据批次处理方法、装置、处理设备，基于获取到的最新的批次生成规则对业务请求信息进行打批处理，并根据获取到的最新的批次捞取规则捞取生成的批次数据，将捞取到的批次数据发送至下游业务处理系统进行业务处理，实现了数据的及时处理。同时，基于下游业务处理系统的业务处理能力如：下游系统中批次数据的处理状态，不断的更新批次捞取规则，并基于更新后的批次捞取规则进行批次数据的捞取和投递，以适应下游业务处理系统的业务处理能力，避免造成数据的积压，增加下游业务处理系统的负担的问题。提高了数据处理效率，实现了数据批次灵活处理，提高了系统的稳定性。

附图说明

为了更清楚地说明本说明书实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本说明书中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。