[发明专利]数据并发的处理方法、装置、电子设备及可读存储介质

说明书

本申请公开了一种数据并发的处理方法、装置、电子设备及可读存储介质，涉及数据处理技术。具体实现方案为：获取第一流程阶段所输出的所述第一流程阶段的第一并发处理结果数据；根据第二流程阶段的并发处理阈值，对所述第一并发处理结果数据进行所述第二流程阶段的并发处理，以获得所述第二流程阶段的第二并发处理结果数据；以及输出所述第二并发处理结果数据。

技术领域

涉及计算机技术，具体涉及数据处理技术，尤其涉及一种数据并发的 处理方法、装置、电子设备及可读存储介质。

背景技术

通常，传统的数据并发的处理方式，在各个不同的流程阶段均采用统 一的并发架构进行数据拆分，所拆分出的每组数据采用独立的线程完成各 流程阶段。

然而，传统的数据并发的处理方式，可能会导致部分流程阶段的资源 消耗与时间消耗严重失衡，从而导致了系统性能的降低。

发明内容

本申请的多个方面提供一种数据并发的处理方法、装置、电子设备及 可读存储介质，用以提升系统性能。

本申请的一方面，提供一种数据并发的处理方法，包括：

获取第一流程阶段所输出的所述第一流程阶段的第一并发处理结果 数据；

根据第二流程阶段的并发处理阈值，对所述第一并发处理结果数据进 行所述第二流程阶段的并发处理，以获得所述第二流程阶段的第二并发处 理结果数据；

输出所述第二并发处理结果数据。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式， 所述根据第二流程阶段的并发处理阈值，对所述第一并发处理结果数据进 行所述第二流程阶段的并发处理，以获得所述第二流程阶段的第二并发处 理结果数据，包括：

根据所述第二流程阶段的并发处理阈值，对全部所获取的所述第一并 发处理结果数据进行分组处理，以获得至少一个数据分组；

对所述至少一个数据分组中各数据分组中的第一并发处理结果数据 进行所述第二流程阶段的并发处理，以获得所述各数据分组的处理结果数 据，以作为所述第二流程阶段的第二并发处理结果数据。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式， 所述根据第二流程阶段的并发处理阈值，对所述第一并发处理结果数据进 行所述第二流程阶段的并发处理，以获得所述第二流程阶段的第二并发处 理结果数据，包括：

获取实时所获取的所述第一并发处理结果数据中未进行所述第二流 程阶段的并发处理的第一并发处理结果数据；

若所述未进行所述第二流程阶段的并发处理的第一并发处理结果数 据的数量大于或等于第二流程阶段的并发处理阈值，对所述未进行所述第 二流程阶段的并发处理的第一并发处理结果数据中所述并发处理阈值的 第一并发处理结果数据进行所述第二流程阶段的并发处理，以获得所述第 二流程阶段的第二并发处理结果数据。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式， 所述第二流程阶段的并发处理阈值取决于所述第二流程阶段的资源消耗 和时间消耗中的至少一项。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式， 所述第一流程阶段的并发处理阈值与所述第二流程阶段的并发处理阈值 独立设置。

本申请的另一方面，提供一种数据并发的处理装置，包括：

数据获取单元，用于获取第一流程阶段所输出的所述第一流程阶段的 第一并发处理结果数据；

并发控制单元，用于根据第二流程阶段的并发处理阈值，对所述第一 并发处理结果数据进行所述第二流程阶段的并发处理，以获得所述第二流 程阶段的第二并发处理结果数据；