[发明专利]一种自动化ETL数据处理工具及其使用方法在审
申请号: | 201811078167.4 | 申请日: | 2018-09-16 |
公开(公告)号: | CN109359146A | 公开(公告)日: | 2019-02-19 |
发明(设计)人: | 赵明 | 申请(专利权)人: | 安徽三实软件科技有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25 |
代理公司: | 北京力量专利代理事务所(特殊普通合伙) 11504 | 代理人: | 毛雨田 |
地址: | 230088 安徽省合肥市高*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明属于计算机领域并公开了一种自动化ETL数据处理工具及其使用方法;包括数据抽取模块、数据转换模块、任务创建模块、数据加载模块、数据存储模块和数据输出模块;所述的数据抽取模块与数据转换模块连接,所述的数据转换模块与任务创建模块连接,所述任务创建模块与数据加载模块连接,所述数据加载模块与数据输出模块连接,所述数据抽取模块、数据转换模块、任务创建模块、数据加载模块均与数据存储模块连接;本发明的自动化ETL数据处理工具可减少频繁地导入导出ETL工具降低处理速度的情况,进而较现有技术有效提高了处理速度和开发效率。 | ||
搜索关键词: | 任务创建模块 数据加载模块 数据转换模块 数据抽取模块 数据处理工具 数据存储模块 数据输出模块 自动化 计算机领域 开发效率 导出 | ||
【主权项】:
1.一种自动化ETL数据处理工具,其特征在于,包括数据抽取模块、数据转换模块、任务创建模块、数据加载模块、数据存储模块和数据输出模块;所述的数据抽取模块与所述的数据转换模块连接,且所述的数据抽取模块用于获取数据源中的源数据,并将获取的源数据传递至所述的数据转换模块中;所述的数据转换模块与所述的任务创建模块连接,且所述的数据转换模块用于将接收到的源数据转换成CSV格式数据,并将所述的CSV格式数据传递至任务创建模块中;所述的任务创建模块与所述的数据加载模块连接,且所述的任务创建模块用于依据所述的CSV格式数据来创建ETL任务;所述的数据加载模块与所述的数据输出模块连接,且所述的数据加载模块用于根据创建的ETL任务来执行、加载该ETL任务;所述的数据输出模块用于将ETL任务执行、加载以后的结果发送至目标数据仓库;所述的数据存储模块均与数据抽取模块、数据转换模块、任务创建模块以及数据加载模块连接,其用于存储输入数据、中间数据以及ETL任务执行以后的结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于安徽三实软件科技有限公司,未经安徽三实软件科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811078167.4/,转载请声明来源钻瓜专利网。
- 上一篇:一种多样式数据的标准化处理方法
- 下一篇:业务组件处理方法、组件服务器和系统