[发明专利]一种数据导出方法和装置有效
申请号: | 201510280295.7 | 申请日: | 2015-05-27 |
公开(公告)号: | CN104881469B | 公开(公告)日: | 2018-12-18 |
发明(设计)人: | 李亮光 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆;胡彬 |
地址: | 100080 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 导出 方法 装置 | ||
本发明公开了一种数据导出方法和装置。所述数据导出方法包括:接收用户的导出数据请求任务,并根据所述导出数据请求任务设置配置信息;根据所述配置信息,确定导出数据格式,并根据导出数据格式生成数据库可执行语句信息;根据所述数据库可执行语句信息,读取需要导出的数据,并将需要导出的数据转换为对应格式的导出数据;将所述导出数据写入文本文件,实现了自动完成不同格式的导出数据的导出工作,提高导出速度,节省运维成本。
技术领域
本发明实施例涉及数据导出技术领域,尤其涉及一种数据导出方法和装置。
背景技术
在数据库日常运维中经常遇到导出数据到文本文件中,比较常用数据格式是CSV(Comma-Separated Values,逗号分隔值)格式,有时需要导出插入INSERT语句格式,虽然格式不同但处理的方式基本相同,目前基本采用spool日志文件方式导出结果,通常情况下是运维DBA(Database administrator,数据库管理员)根据用户的导出数据请求编写对应的导出数据脚本,然后运行导出数据脚本,生成日志文件在屏幕滚动显示,滚动显示所有导出数据之后,打包发送给用户。因此,对于不同的导出数据需求,每次都要重新编写导出数据脚本,灵活性较差,运维工作将变得十分繁杂,耗费大量的人力资源。并且当数据量较大时,通过spool日志文件屏幕滚动显示的方法导出数据耗时长,导出速度慢,时间成本上不可控。
发明内容
本发明提供一种数据导出方法和装置,以实现自动完成不同格式的导出数据的导出工作,提高导出速度,节省运维成本。
第一方面,本发明实施例提供了一种数据导出方法,该方法包括:
接收用户的导出数据请求任务,并根据所述导出数据请求任务设置配置信息;
根据所述配置信息,确定导出数据格式,并根据导出数据格式生成数据库可执行语句信息;
根据所述数据库可执行语句信息,读取需要导出的数据,并将需要导出的数据转换为对应格式的导出数据;
将所述导出数据写入文本文件。
进一步的,所述根据所述配置信息,确定导出数据格式,并根据导出数据格式生成数据库可执行语句信息,包括:
根据所述配置信息,判断导出数据格式是否为插入语句格式,若是,则生成数据库可执行的插入语句信息;否则,生成数据库可执行的逗号分隔值语句信息。
进一步的,在接收用户的导出数据请求任务,并根据所述导出数据请求任务设置配置信息之后,还包括:
根据配置信息获取导出数据表占用物理空间,并根据所述导出数据表占用物理空间判断是否开启并行导出模式。
进一步的,当根据所述导出数据表占用物理空间开启并行导出模式时,还包括:
根据操作系统资源使用率,设置并行导出模式的并行度。
进一步的,在将所述导出数据写入文本文件之前,还包括:
判断所述导出数据的编码格式与所述配置信息是否一致,并在不一致时,将所述导出数据的编码格式转换为所述配置信息中的编码格式。
第二方面,本发明实施例提供了一种数据导出装置,该装置包括:
配置信息设置模块,用于接收用户的导出数据请求任务,并根据所述导出数据请求任务设置配置信息;
解析模块,用于根据所述配置信息,确定导出数据格式,并根据导出数据格式生成数据库可执行语句信息;
数据格式转换模块,用于根据所述数据库可执行语句信息,读取需要导出的数据,并将需要导出的数据转换为对应格式的导出数据;
导出模块,用于将所述导出数据写入文本文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510280295.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种面向海量图片数据的重复数据删除方法
- 下一篇:一种快速数据保存方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置