[发明专利]一种ETL数据处理的方法及系统在审
申请号: | 201610886270.6 | 申请日: | 2016-10-11 |
公开(公告)号: | CN106250571A | 公开(公告)日: | 2016-12-21 |
发明(设计)人: | 温宗臣;张翼;何良均;范卫卫;冯森林;李冰;曾攀;严亮;张书凡 | 申请(专利权)人: | 北京集奥聚合科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京和信华成知识产权代理事务所(普通合伙)11390 | 代理人: | 胡剑辉 |
地址: | 100085 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种ETL数据处理的方法,其能够实现从多个源头读取原始数据,向多个异构存储系统同步数据,可以大大提升ETL研发的速度和数据交换的效率。该方法包括:(1)配置ETL系统的读插件,每一种读插件对应一个异构的数据源,读插件是开放的;(2)配置ETL系统的写插件,每一种写插件对应一个异构的目标存储系统,写插件也是开放的;(3)每一个ETL任务具有其对应的配置文件,任务驱动器通过配置文件中的配置信息加载相关的读写插件,完成数据多读和多写的并发执行。还有ETL数据处理的系统。 | ||
搜索关键词: | 一种 etl 数据处理 方法 系统 | ||
【主权项】:
一种ETL数据处理的方法,其特征在于:该方法包括以下步骤:(1)配置ETL系统的读插件,每一种读插件对应一个异构的数据源,读插件是开放的;(2)配置ETL系统的写插件,每一种写插件对应一个异构的目标存储系统,写插件也是开放的;(3)每一个ETL任务具有其对应的配置文件,任务驱动器通过配置文件中的配置信息加载相关的读写插件,完成数据多读和多写的并发执行。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京集奥聚合科技有限公司,未经北京集奥聚合科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610886270.6/,转载请声明来源钻瓜专利网。
- 上一篇:一种地下排水管网智能管理系统
- 下一篇:L型管道冲蚀率确定方法及装置