[发明专利]基于多时区的对数据仓库进行批量加载的装置及方法有效
申请号: | 201310170713.8 | 申请日: | 2013-05-10 |
公开(公告)号: | CN103294774A | 公开(公告)日: | 2013-09-11 |
发明(设计)人: | 邬敏炜;江军华;李卓辉;黄兆斌;杨晨旭;陶辰承 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 宋焰琴 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于多时区的对数据仓库进行批量加载的装置和方法。所述装置包括数据存储器,用于存储上游源数据、临时区数据、基础区数据、汇总区数据和调度数据。数据预处理装置,用于对到达数据仓库的上游源数据进行处理,为后续的数据加载做准备。数据加载装置,用于接收数据预处理装置的消息指令,从数据存储器读取源数据和调度数据,按照调度顺序加载处理源数据,并将处理结果保存到数据存储器中,以及在调度过程中更新数据存储器中的调度数据。本发明的装置和方法提高了多时区数据加载的效率,具有较好的可扩展性和可维护性,能很好地满足多时区多批量的数据加载需求。 | ||
搜索关键词: | 基于 多时 数据仓库 进行 批量 加载 装置 方法 | ||
【主权项】:
一种基于多时区的对数据仓库进行批量加载的装置,包括:数据存储器(1),用于存储上游源数据、临时区数据、基础区数据、汇总区数据和调度数据,其进一步包括:上游源数据管理单元(101),用于存储上游应用下传给数据仓库的业务数据;临时区数据管理单元(102),用于存储经过初步处理的源数据;基础区数据管理单元(103),用于存储经过分析统计、模型化的数据;汇总区数据管理单元(104),用于存储经过汇总统计的指标数据;调度数据管理单元(105),用于存储调度相关信息;数据预处理装置(2),用于对到达数据仓库的上游源数据进行处理,为后续的数据加载做准备;数据加载装置(3),用于接收数据预处理装置(2)的消息指令,从数据存储器(1)读取源数据和调度数据,按照调度顺序加载处理源数据,并将处理结果保存到数据存储器(1)中,以及在调度过程中更新数据存储器(1)中的调度数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310170713.8/,转载请声明来源钻瓜专利网。