[发明专利]一种应对关系数据库入库瓶颈问题的处理方法

权利要求书

1.一种应对关系数据库入库瓶颈问题的处理方法，其特征在于，包括如下步骤：

(1)应用接收到外部输入的数据，进行写数据库操作；

(2)启动写数据库操作的线程池，根据数据库类型初始化线程池的线程数量，判断线程池的线程使用情况，若线程池的线程没有都被使用，则执行写数据库操作，结束流程；否则执行步骤(3)；

(3)若线程池的线程都被使用，则触发一级缓存策略；其中，若一级缓存消息队列MQ存在数据堆积情况，则启动二级缓存策略，即启动写磁盘文件的应用程序，将消息队列的数据快速批量写入磁盘文件；当一级缓存消息队列MQ没有数据堆积时，则暂停二级缓存策略，数据处理交由一级缓存应用程序入库；

(4)当写数据库线程池空闲时，应用自动暂停一级缓存策略，处理全部交由写线程直接入库操作，结束流程。

2.根据权利要求1所述的一种应对关系数据库入库瓶颈问题的处理方法，其特征在于：所述的处理方法还包括：

(5)为保证数据时效性，对写入磁盘文件的数据，另外，应用程序定时5分钟轮询一次，发现未处理文件，读取数据批量入库。

3.根据权利要求1所述的一种应对关系数据库入库瓶颈问题的处理方法，其特征在于：所述的线程池的线程数量设置为1000。

4.根据权利要求1所述的一种应对关系数据库入库瓶颈问题的处理方法，其特征在于：所述的一级缓存策略为启用写消息队列MQ的应用程序，把线程池繁忙时期无法写入的数据放入一个消息队列集。

5.根据权利要求1所述的一种应对关系数据库入库瓶颈问题的处理方法，其特征在于：所述的一级缓存消息队列MQ存在数据堆积情况为存在单个MQ队列超过5000条数据未入库的情形。

6.根据权利要求1所述的一种应对关系数据库入库瓶颈问题的处理方法，其特征在于：所述的一级缓存消息队列MQ没有数据堆积情况为出现未入库数据降到3500条的情形。