[发明专利]大数据量文件处理的方法及系统

说明书

技术领域

本发明涉及到数据处理领域，特别涉及到一种大数据量文件处理的方法及系统。

背景技术

现有技术的数据系统中，用户经常需要查询一些数据量很大的业务报表。以前的处理方案，是直接在当前页面中呈现或者直接引出到Excel中。现在大多数数据系统已经不提供上述功能，通常是在业务上进行限制。

如果使用以前的方式，因为数据量大，数据展现出来需要几分钟的时间甚至更长，用户只能等待并且不能使用系统做其他的事情，降低了工作效率；如果对业务进行限制，同样使得工作效率不高。

发明内容

本发明的主要目的为提供一种大数据量文件处理的方法及系统，提升了工作效率以及改善了用户体验。

本发明提出一种大数据量文件处理的方法，包括步骤：

接收大数据量文件查询指令；

根据所述查询指令，通过异步处理生成大数据量文件，并存放至指定目录。

优选地，所述根据所述文件查询指令生成大数据量文件，并存放至指定目录的步骤具体包括：

根据所述查询指令，提取相应大数据量表格数据写入至Excel文件中，压缩所述Excel文件，并存放至指定目录。

优选地，所述接收文件查询指令的步骤后还包括：

根据所述查询指令判断之前是否有相同任务；

在没有相同任务时，根据所述查询指令生成大数据量文件，并存放至指定目录；

在有相同任务时，下载之前已生成的大数据量文件。

优选地，所述方法还包括：

根据查询指令进行进度提示。

优选地，所述方法还包括：

对查询指令进行管理；所述管理包括查询、删除以及发起。

本发明还提出一种大数据量文件处理的系统，包括：

接收模块，用于接收大数据量文件查询指令；

处理模块，用于根据所述查询指令，通过异步处理生成大数据量文件，并存放至指定目录。

优选地，所述处理模块具体用于：

根据所述查询指令，提取相应大数据量表格数据写入至Excel文件中，压缩所述Excel文件，并存放至指定目录。

优选地，所述系统还包括判断模块，其用于：

根据所述查询指令判断之前是否有相同任务；

在没有相同任务时，根据所述查询指令生成大数据量文件，并存放至指定目录；

在有相同任务时，下载之前已生成的大数据量文件。

优选地，所述系统还包括：

提示模块，用于根据查询指令进行进度提示。

优选地，所述系统还包括：

管理模块，用于对查询指令进行管理；所述管理包括查询、删除以及发起。

本发明大数据量文件处理的方法及系统，在客户端提交查询大数据量文件的任务后，通过应用服务器异步处理，提供所查询大数据量文件的压缩文件给用户下载；如此，客户端可以同时提交多个大数据量文件任务，也无需等待可以使用系统做其他事情，文件下载完成后即时通知用户，提高了工作效率。

附图说明

图1是本发明一种大数据量文件处理的方法一实施例的步骤流程示意图；

图2是本发明一种大数据量文件处理的方法一实施例的另一步骤流程示意图；

图3是本发明一种大数据量文件处理的方法另一实施例的步骤流程示意图；

图4是本发明一种大数据量文件处理的系统一实施例的结构示意图；

图5是本发明一种大数据量文件处理的系统另一实施例的结构示意图；

图6是本发明一种大数据量文件处理的系统另一实施例的另一结构示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

参照图1，提出本发明一种大数据量文件处理的方法的一实施例。该方法包括步骤：

步骤S10、接收大数据量文件查询指令；

步骤S11、根据所述查询指令，通过异步处理生成大数据量文件，并存放至指定目录。