[发明专利]数据处理方法、装置、系统及介质

权利要求书

1.一种数据处理方法，包括：

接收访问系统的多个第一数据；以及

将所述多个第一数据实时分流暂存于至少两个中间数据库，其中，所述中间数据库能够随机写入数据并能够进行数据查询。

2.根据权利要求1所述的方法，其中，将所述多个第一数据实时分流暂存于至少两个中间数据库之前，还包括：

对每一个第一数据，判断所述第一数据是否属于重复性数据；以及

在所述第一数据属于重复性数据的情况下，拦截所述第一数据。

3.根据权利要求1所述的方法，其中，将所述多个第一数据实时分流暂存于至少两个中间数据库包括：

根据所述中间数据库的个数，将所述多个第一数据以轮询方式实时分流至所述至少两个中间数据库。

4.根据权利要求1所述的方法，还包括：

根据调度任务将所述中间数据库的数据持久化至第二数据库，其中所述第二数据库能够持久化存储和查询数据。

5.根据权利要求4所述的方法，其中，所述调度任务包括以下的任意一项或多项：

持久化操作的时间间隔、每次持久化操作的数据量、以及每次持久化操作的数据类型。

6.根据权利要求4所述的方法，根据调度任务将所述中间数据库的数据持久化至第二数据库之后，还包括：

从所述中间数据库删除被持久化处理的数据。

7.根据权利要求1所述的方法，其中：

所述中间数据库包括LevelDB数据库。

8.一种数据处理装置，包括：

数据接收模块，用于接收访问系统的多个第一数据；以及

数据分流模块，用于将所述多个第一数据实时分流暂存于至少两个中间数据库，其中，所述中间数据库随机写入数据并能够进行数据查询。

9.根据权利要求8所述的装置，其中，还包括：

重复性判断模块，用于在将所述多个第一数据分流暂存至两个以上的中间数据库之前，对每一个第一数据，判断所述第一数据是否属于重复性数据；以及

重复数据拦截模块，用于在所述第一数据属于重复性数据的情况下，拦截所述第一数据。

10.根据权利要求8所述的装置，其中，将所述多个第一数据实时分流暂存于至少两个中间数据库包括：

根据所述中间数据库的个数，将所述多个第一数据以轮询方式实时分流至所述至少两个中间数据库。

11.根据权利要求8所述的装置，还包括：

数据持久化模块，用于根据调度任务将所述中间数据库的数据持久化至第二数据库，其中所述第二数据库能够持久化存储和查询数据。

12.根据权利要求11所述的装置，其中，所述调度任务包括以下的任意一项或多项：

持久化操作的时间间隔、每次持久化操作的数据量、以及每次持久化操作的数据类型。

13.根据权利要求11所述的装置，还包括：

数据删除模块，用于在根据调度任务将所述中间数据库的数据持久化至第二数据库之后，从所述中间数据库删除被持久化处理的数据。。

14.根据权利要求8所述的装置，其中：

所述中间数据库包括LevelDB数据库。

15.一种数据处理系统，包括：

一个或多个处理器；

存储器，用于存储一个或多个程序，

其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现根据权利要求1～7任意一项所述的方法。

16.一种计算机可读介质，其上存储有可执行指令，该指令被处理器执行时使处理器实现根据权利要求1～7任意一项所述的方法。