[发明专利]一种文件处理过程中流量控制方法及设备

说明书

技术领域

本发明涉及计算机系统，特别涉及一种文件处理过程中流量控制方法及设备。

背景技术

随着短信业务的发展成熟，运营商一方面要求短信中心运行稳定，另一方面希望能提供基于短信的各种运营分析数据。在此指导思想下，短信中心的功能趋于简单的业务处理，而短信数据的入库和统计分析工作则由另外的模块来完成。

目前，考虑成本等多种因素，均采取多个短信中心话单集中处理的办法来实现数据入库。但海量的数据以及数据库自身存在的性能瓶颈使其无法快速完成预处理文件产生的数据的入库操作，相反文件处理占用了大量的CPU资源，又直接降低了数据库的入库性能，使得系统的稳定性和数据正确性大打折扣。

发明内容

本发明所要解决的技术问题是，提供一种文件处理过程中流量控制方法及设备，从而提高系统整体处理文件的稳定性。

为了解决上述问题，本发明公开了一种文件处理过程中流量控制方法，包括：

文件处理过程中，文件处理程序实时判断是否接收到流量控制指令，当所述文件处理程序接收到所述流量控制指令时，根据所接收的流量控制指令控制文件处理速度。

进一步地，上述方法中，所述文件处理程序实时判断是否接收到所述流量控制指令的同时，还判断当前处理速度是否超过设定的流量阈值，若当前处理速度超过所述流量阈值时，则所述文件处理程序在单位时间内限制文件处理速度。

其中，所述文件处理程序判断当前处理速度是否超过所述流量阈值的过程是：通过读取配置文件中设定的流量阈值，以判断当前处理速度是否超过设定的流量阈值。

所述流量控制指令为无限制指令、一般限制指令或者阻塞指令。

所述文件处理程序接收到所述无限制指令时，则无条件的处理扫描到的文件；

所述文件处理程序接收到所述一般限制指令时，则进一步判断当前处理速度是否超过流量阈值，如果超过流量阈值，则停止文件的处理；如果未达到流量阈值，则继续文件的处理；

所述文件处理程序接收到所述阻塞指令时，则直接返回，对文件不做任何处理，结束操作。

本发明还公开了一种文件处理过程中流量控制设备，至少包括指令接收模块以及处理模块，其中：

所述指令接收模块，用于接收外部的流量控制指令，并将所述接收的流量控制指令发送到所述处理模块；

所述处理模块，用于接收所述判断模块发送的判断结果，当所接收的判断结果是当前处理速度超过所述流量阈值时，则在单位时间内限制文件处理速度，以及用于接收所述指令接收模块发送的流量控制指令，并根据所接收的流量控制指令进行相应的处理。

进一步地，上述设备还包括判断模块，所述判断模块，用于在文件处理过程中实时判断当前处理速度是否超过设定的流量阈值，并将判断结果发送到所述处理模块。

其中，所述判断模块，读取配置文件中设定的流量阈值，并实时判断当前处理速度是否超过所述流量阈值。

所述流量控制指令为无限制指令、一般限制指令或者阻塞指令。

所述处理模块，接收到所述无限制指令时，则无条件的处理扫描到的文件；

接收到所述一般限制指令时，则进一步判断当前处理速度是否超过流量阈值，如果超过流量阈值，则停止文件的处理；如果未达到流量阈值，则继续文件的处理；

接收到所述阻塞指令时，则直接返回，对文件不做任何处理，结束操作。

本发明技术方案通过对上游的文件处理的流量控制，降低了CPU资源的占用，提高了系统整体处理的稳定性。

附图说明

图1为本实施例中文件处理过程中流量控制设备的结构示意图；

图2为本实施例中文件处理过程中流量控制的流程图。

具体实施方式

本发明的主要构思是，在文件处理过程中，文件处理程序根据设定的流量阈值对数据流量进行控制，该流量阈值可以是保存在配置文件中的静态参数，也可以是文件处理过程中通过外部流量控制指令实时控制的动态参数，其中，文件处理程序收到流量控制指令后，根据流量控制指令进行相应的流量控制处理，例如，流量控制指令为不限制指令，则无条件的处理所有文件；流量控制指令为阻塞指令，则立刻返回不处理任何文件；流量控制指令为有条件限制指令，则根据流量阈值控制文件处理的速度。

下面结合附图及具体实施例对本发明技术方案作进一步详细说明。