[发明专利]数据处理控制方法、装置、电子设备及可读存储介质

说明书

本申请公开了一种数据处理控制方法、装置、电子设备及可读存储介质，应用于数据处理技术领域，数据处理控制方法包括：获取待处理数据的数据流量、数据处理设备的等待处理队列中的队列数据流量以及数据处理设备的实时数据处理量；依据数据流量和队列数据流量，确定处理模式，其中，处理模式至少包括高流量模式、低流量模式以及中流量模式中的一种；依据实时数据处理量，选取数据处理设备控制模式以及调整数据处理设备的控制参数，其中，控制模式至少包括扩容控制模式、缩容控制模式和定容控制模式中的一种；控制数据处理设备以控制模式和控制参数对待处理数据进行数据处理。本申请解决了无法兼顾数据处理的低处理成本和高处理效率的技术问题。

技术领域

本申请涉及数据处理技术领域，尤其涉及一种数据处理控制方法、装置、电子设备及可读存储介质。

背景技术

目前，通过配备固定且较小的处理空间的数据处理设备对待处理数据进行处理的方法，当待处理数据为日志数据时，由于日志数据在不同的时间段（节假日、特殊活动或者休息时间段）流量波动较大，容易出现在某一时间段因为大量突增的日志数据导致日志数据大量堆积在数据处理等待队列中，从而导致数据处理设备的处理效率低的情况，或者，在某一时间段日志数据较少，但数据处理设备的处理空间相对日志数据较多，从而导致数据处理设备的资源浪费。且不同的日志数据的数据包大小可能差距较大，从而使得数据处理设备处理每个日志数据的时间也参差不齐，所以即便在同一时间段，也可能出现日志数据的突增或骤降，从而导致无法兼顾数据处理的低处理成本和高处理效率。

发明内容

本申请的主要目的在于提供一种数据处理控制方法、装置、电子设备及可读存储介质，旨在解决现有技术中无法兼顾数据处理的低处理成本和高处理效率的技术问题。

为实现上述目的，本申请提供一种数据处理控制方法，应用于数据处理控制设备，所述数据处理控制方法包括：

获取待处理数据的数据流量、数据处理设备的等待处理队列中的队列数据流量以及所述数据处理设备的实时数据处理量；

依据所述数据流量和所述队列数据流量，确定所述数据处理设备的处理模式，其中，所述处理模式至少包括高流量模式、低流量模式以及中流量模式中的一种；

依据所述实时数据处理量，选取所述数据处理设备在所述处理模式下的控制模式以及调整所述数据处理设备的控制参数，其中，所述控制模式至少包括扩容控制模式、缩容控制模式和定容控制模式中的一种；

控制所述数据处理设备以所述控制模式和所述控制参数对所述待处理数据进行数据处理。

为实现上述目的，本申请还提供一种数据处理控制装置，所述数据处理控制装置应用于数据处理控制设备，所述数据处理控制装置包括：

获取模块，用于获取待处理数据的数据流量、数据处理设备的等待处理队列中的队列数据流量以及所述数据处理设备的实时数据处理量；

确定模块，用于依据所述数据流量和所述队列数据流量，确定所述数据处理设备的处理模式，其中，所述处理模式至少包括高流量模式、低流量模式以及中流量模式中的一种；

选取模块，用于依据所述实时数据处理量，选取所述数据处理设备在所述处理模式下的控制模式以及调整所述数据处理设备的控制参数，其中，所述控制模式至少包括扩容控制模式、缩容控制模式和定容控制模式中的一种；

控制模块，用于控制所述数据处理设备以所述控制模式和所述控制参数对所述待处理数据进行数据处理。

本申请还提供一种电子设备，所述电子设备包括：存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的所述数据处理控制方法的程序，所述数据处理控制方法的程序被处理器执行时可实现如上述的数据处理控制方法的步骤。