[发明专利]一种基于动态配置数据库的分库分表数据抽取方法和装置在审
申请号: | 201710400242.3 | 申请日: | 2017-05-31 |
公开(公告)号: | CN108984549A | 公开(公告)日: | 2018-12-11 |
发明(设计)人: | 王军涛 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 张一军;姜劲 |
地址: | 100195 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种基于动态配置数据库的分库分表数据抽取方法和装置,能够对分库分表规则进行配置化管理,便于开发和维护,提高抽取效率,能够实现任务中断续接。所述方法包括:生成配置文件,包括数据库中每个物理表与逻辑表的对应关系和数据抽取条件;解析配置文件,使得根据所述数据抽取条件为每个物理表生成一个抽取任务,并且把抽取任务放入任务池;执行任务池中的每个抽取任务,每个抽取任务执行后产生相应的抽取数据;合并抽取数据,使得从对应相同逻辑表的物理表中抽取的数据合并在一起。 | ||
搜索关键词: | 抽取 物理表 数据抽取条件 方法和装置 数据库 抽取数据 动态配置 配置文件 数据抽取 任务池 分表 分表规则 任务执行 任务中断 数据合并 逻辑表 与逻辑 放入 续接 解析 合并 配置 维护 开发 管理 | ||
【主权项】:
1.一种基于动态配置数据库的分库分表数据抽取方法,其特征在于,包括:生成配置文件,所述配置文件包括所述数据库中每个物理表与逻辑表的对应关系和数据抽取条件;;解析所述配置文件,根据所述数据抽取条件为每个物理表生成一个抽取任务,并且把所述抽取任务放入任务池;执行所述任务池中的每个抽取任务,每个抽取任务执行后产生相应的抽取数据;合并所述抽取数据,使得从对应相同逻辑表的物理表中抽取的数据合并在一起。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710400242.3/,转载请声明来源钻瓜专利网。