[发明专利]一种应用于数据仓库的数据处理方法和装置有效
申请号: | 201810438022.4 | 申请日: | 2018-05-09 |
公开(公告)号: | CN108629029B | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 安金龙;刘业辉;张飞;张宁;王淼鑫;张增 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/23;G06F16/28 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 张一军;张效荣 |
地址: | 100195 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种应用于数据仓库的数据处理方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:接收实时数据,确定与实时数据相关联的历史数据;确定历史数据所处文件,传输实时数据至文件中的实时数据层;分别获取实时数据以及历史数据的版本,提取最新版本的实时数据或历史数据,作为文件的最新数据记录,并写入历史数据层中进行记录更新。该实施方式实现了传统数据仓库与实时计算技术的结合,提升了数据仓库的ETL时效性,满足了用户进行实时数据的查询分析需求;另外,基于现有离线数据的基础上,可降低对数据仓库实时计算的开发成本,更加符合数据仓库的业务需求。 | ||
搜索关键词: | 一种 应用于 数据仓库 数据处理 方法 装置 | ||
【主权项】:
1.一种应用于数据仓库的数据处理方法,其特征在于,包括:接收实时数据,确定与所述实时数据相关联的历史数据;确定所述历史数据所处文件,传输所述实时数据至所述文件中的实时数据层;其中,所述历史数据位于所述文件的历史数据层中;分别获取所述实时数据以及所述历史数据的版本,提取最新版本的所述实时数据或所述历史数据,作为所述文件的最新数据记录,并写入所述历史数据层中进行记录更新。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810438022.4/,转载请声明来源钻瓜专利网。
- 上一篇:一种知识产权资源运营管理系统
- 下一篇:数据显示方法及装置