[发明专利]食品监管信息资源增量ETL系统及方法在审
申请号: | 201910287325.5 | 申请日: | 2019-04-11 |
公开(公告)号: | CN109992621A | 公开(公告)日: | 2019-07-09 |
发明(设计)人: | 郭承湘;李建忠;石怀明;封荣日 | 申请(专利权)人: | 郭承湘 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06Q10/06;G06Q50/26 |
代理公司: | 北京天盾知识产权代理有限公司 11421 | 代理人: | 贺丽娟 |
地址: | 530000 广西壮族自治区*** | 国省代码: | 广西;45 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种食品监管信息资源增量ETL的方法,应用于食品监管信息资源增量ETL系统,所述方法包括:抽取目标库及源数据库中的数据至kettle缓存;在kettle缓存中分别排序、去重目标库及源数据库中的数据;合并排序、去重后的目标库及源数据库中的数据;分类标记、映射合并后的目标库及源数据库中的数据;过滤分类标记及映射后的目标库及源数据库中的数据进行,将目标库及源数据库中相同的数据过滤;及根据源数据库的数据更新目标库的数据。本发明能够将数据源中的食品安全监管数据增量抽取到数据仓库,且在抽取过程中不会删除数据仓库中目标表数据,影响基于数据仓库的应用运行。 | ||
搜索关键词: | 源数据库 目标库 食品监管 信息资源 缓存 分类标记 数据仓库 去重 映射 排序 抽取 食品安全监管 数据增量抽取 目标表数据 删除数据 数据更新 数据过滤 应用运行 合并 数据源 过滤 仓库 应用 | ||
【主权项】:
1.一种食品监管信息资源增量ETL的方法,应用于食品监管信息资源增量ETL系统,其特征在于,所述方法包括:抽取目标库及源数据库中的数据至kettle缓存;在kettle缓存中分别排序、去重目标库及源数据库中的数据;合并排序、去重后的目标库及源数据库中的数据;分类标记、映射合并后的目标库及源数据库中的数据;过滤分类标记及映射后的目标库及源数据库中的数据进行,将目标库及源数据库中相同的数据过滤;及根据源数据库的数据更新目标库的数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郭承湘,未经郭承湘许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910287325.5/,转载请声明来源钻瓜专利网。
- 上一篇:智能控制会话式计算机系统
- 下一篇:一种应急资源共享交换系统