[发明专利]一种基于kettle商业智能平台异步下载的方法

说明书

本发明提供了一种基于kettle商业智能平台异步下载的方法，涉及商业智能技术领域；该方法包括以下的步骤：S1、通过从文件下载服务器查询当前用户先前所保存的文件；S2、在数据库创建需要下载的大表对应的初始表；S3、编写常用维度的schema模型；S4、对saiku进行二次开发，根据根据schema模型选出所需的字段；S5、获取所需要下载的文件的维度、样式和字段需求，查询对应的初始表的模板数据给出用户预览样式；S6、将用户选好的维度和所需字段解析后，以参数形式传递至kettle；S7、获得所需文件；S8、进行文件下载；本发明的有益效果是：通过将下载任务转移到kettle后台，改善了批量下载页面卡死的问题。

技术领域

本发明涉及商业智能技术领域，更具体的说，本发明涉及一种基于kettle商业智能平台异步下载的方法。

背景技术

随着信息化程度不断加深，企业对“大数据”分析服务的渴求也日益强烈。互联网持续增长信息资源蕴含了巨量的具有商业价值的信息，成为重要的商业智能服务信息源头。

目前很多商业智能分析工具，数据都存储在oracle数据库，基于oracle的商业智能分析平台的下载大部分是同步的。由于业务需要，经常会有大数据量的下载需求，当批量下载时经常会出现页面卡死，操作人员只能等待无法进行其他操作。加上商业智能分析平台无法进行分布式扩容，面对大批量的下载操作经常出现集群负载过高从而瘫痪的情况。另外，支持的数据库比较少，仅支持关系型数据库，不支持nosql数据库。

发明内容

为了克服现有技术的不足，本发明提供一种基于kettle商业智能平台异步下载的方法，通过将下载任务转移到kettle后台，改善了批量下载页面卡死的问题。

本发明解决其技术问题所采用的技术方案是：一种基于kettle商业智能平台异步下载的方法，其改进之处在于，该方法包括以下的步骤：

S1、通过从文件下载服务器查询当前用户先前所保存的文件，在商业智能平台上嵌套异步下载按钮和文件下载服务器按钮；

S2、在数据库创建需要下载的大表对应的初始表，且该初始表中仅保存模板数据；

S3、编写常用维度的schema模型；

S4、对saiku进行二次开发，根据根据schema模型选出所需的字段，当用户需要下载文件时，查看文件下载服务器是否存在此用户权限范围内曾经下载过的文件，如存在，则通过文件下载服务器直接将文件下载到本地；如不存在，则进入步骤S5；

S5、获取所需要下载的文件的维度、样式和字段需求，查询对应的初始表的模板数据给出用户预览样式；

S6、将用户选好的维度和所需字段解析后，以参数形式传递至kettle；

S7、kettle调用presto，根据相应的配置文件以及所需的文件去查询相应的数据库，获得所需文件；

S8、进行文件下载，并将下载的文件保存到文件下载服务器。

进一步的，所述的步骤S1中，通过编写代码，从文件下载服务器查询当前用户先前所保存的文件。

进一步的，所述的步骤S2中，从文件下载服务器查询当前用户先前所保存的文件后，将文件展示在下载列表页面。

进一步的，所述的步骤S4中，在对saiku进行二次开发时，在页面添加下载按钮，当用户需要下载文件时，则点击页面的下载按钮。

进一步的，所述的步骤S5中，当给出用户预览样式时，在用户进行确认后，则进入步骤S6，否则返回到步骤S5，重新获取所需要下载的文件的维度、样式和字段需求。