[发明专利]数据导出方法、装置、设备及存储介质在审
申请号: | 201710120011.7 | 申请日: | 2017-03-02 |
公开(公告)号: | CN106919684A | 公开(公告)日: | 2017-07-04 |
发明(设计)人: | 李明明 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京鸿德海业知识产权代理事务所(普通合伙)11412 | 代理人: | 袁媛 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 导出 方法 装置 设备 存储 介质 | ||
【技术领域】
本发明涉及计算机应用技术,特别涉及数据导出方法、装置、设备及存储介质。
【背景技术】
随着业务的发展,销售人员及运营人员对查询数据导出的需求越来越多。
现有技术中,导出服务与业务系统耦合,从而影响了业务系统的性能,尤其是当结果集过大时,会严重影响业务系统的性能。
【发明内容】
有鉴于此,本发明提供了数据导出方法、装置、设备及存储介质,能够提升业务系统的性能。
具体技术方案如下:
一种数据导出方法,包括:
导出平台获取来自业务系统的任务请求;
所述导出平台根据所述任务请求构造任务,并执行所述任务,生成结果文件;
所述导出平台对所述结果文件进行保存,以便所述业务系统获取所保存的所述结果文件。
一种数据导出装置,包括:接口模块、任务构造模块、执行模块以及存储模块;
所述接口模块,用于获取来自业务系统的任务请求,并提交给所述任务构造模块;
所述任务构造模块,用于根据所述任务请求构造任务,并提交给所述执行模块;
所述执行模块,用于执行所述任务,生成结果文件,并将所述结果文件保存到所述存储模块中,以便所述业务系统获取所保存的所述结果文件。
一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现如以上所述的方法。
一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现如以上所述的方法。
基于上述介绍可以看出,采用本发明所述方案,拆分业务系统与导出服务,即业务系统与导出服务解耦,从而尽可能地避免了数据导出对业务系统的性能造成影响,即相比于现有技术提升了业务系统的性能。
【附图说明】
图1为本发明所述数据导出方法实施例的流程图。
图2为本发明所述数据导出方法的交互流程示意图。
图3为本发明所述数据导出装置实施例的组成结构示意图。
图4示出了适于用来实现本发明实施方式的示例性计算机系统/服务器12的框图。
【具体实施方式】
为了使本发明的技术方案更加清楚、明白,以下参照附图并举实施例,对本发明所述方案作进一步地详细说明。
图1为本发明所述数据导出方法实施例的流程图,如图1所示,包括以下具体实现方式:
在101中,导出平台获取来自业务系统的任务请求。
在此之前,导出平台可接受业务系统在导出平台上的注册及所进行的信息配置。
导出平台可对外提供接口,比如,超文本传输协议(HTTP,HyperText Transfer Protocol)接口或远程过程调用协议(RPC,Remote Procedure Call Protocol)接口等,业务系统等接入系统可通过接口与导出平台进行信息的交互。
相应地,业务系统可在导出平台上进行注册,生成系统token即APP_KEY,并进行信息配置,如配置通讯协议及数据源,配置导出模板(即配置结果格式化模板),配置元数据托管等。
其中,结果格式化模板配置示例如下:
之后,业务系统可根据用户的要求向导出平台发出任务请求,即向导出平台发起任务。
导出平台在获取到业务系统的任务请求之后,可向业务系统返回任务响应信息,其中可携带有任务标识等,以便后续业务系统根据任务标识向导出平台查询任务的执行状态,即了解任务的进展情况,当确定任务执行完成时,获取所保存的结果文件。
在102中,导出平台根据任务请求构造任务,并执行任务,生成结果文件。
导出平台可根据获取到的任务请求以及业务系统的配置信息构造任务,并执行所构造的任务,从而生成所需的结果文件。
执行任务的过程可包括:
抓取维度切片数据;
根据维度切片数据生成可执行结构化查询语言(SQL,Structured Query Language),读取结果数据;
根据结果数据生成中间结果文件;
将中间结果文件拆分为一系列小文件,作为所需的结果文件。
其中,在生成中间结果文件时,可进一步确定结果数据中是否包括来自于异构数据源的结果数据,如果是,则可对来自于异构数据源的结果数据进行整合,生成中间结果文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710120011.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种快速查询数据的方法及系统
- 下一篇:一种海量数据文件处理方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置