[发明专利]一种历史数据存储方法和系统在审
申请号: | 201410363419.3 | 申请日: | 2014-07-28 |
公开(公告)号: | CN104102737A | 公开(公告)日: | 2014-10-15 |
发明(设计)人: | 杨亮;王晶 | 申请(专利权)人: | 中国农业银行股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 100005 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种历史数据存储方法和系统,所述方法针对历史数据中存在价值较低的数据这一现象,预先制定了筛选策略,以过滤价值较低的数据;并将结构化数据转化为非结构化的文本数据,同时为避免对部分表内的数据在每个抽取周期重复抽取,造成存储浪费,制定了数据抽取策略及相应的两种抽取方式:增量和全量抽取,例如明细类表数据量大、增量大且有时间字段,可采用增量方式进行数据抽取,只保存增量数据,而其他表则采用全量方式,最终得到文本格式的抽取数据,并将其保存至存储设备。可见,本发明通过数据筛选过滤了价值较低的数据,同时只保存增量数据,并将结构化数据转化为非结构化的文本数据,大大减少了需保存的数据量,降低了存储成本。 | ||
搜索关键词: | 一种 历史数据 存储 方法 系统 | ||
【主权项】:
一种历史数据存储方法,其特征在于,包括:依据预先制定的筛选策略对信息系统产生的结构化历史数据进行筛选,得到待归档的结构化历史数据,所述待归档的结构化历史数据包括至少一种类型的数据表;依据预先设定的数据抽取策略获取所述待归档的结构化历史数据中每种类型数据表所属的数据抽取方式,其中,所述数据抽取方式包括增量抽取方式和全量抽取方式;若相应类型数据表的抽取方式为增量抽取方式,则对所述类型数据表中的数据进行增量抽取,得到文本文件格式的增量数据;若相应类型数据表的抽取方式为全量抽取方式,则对所述类型数据表中的数据进行全量抽取,得到文本文件格式的全量数据;将所述文本文件格式的增量数据以及全量数据保存至存储设备。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国农业银行股份有限公司,未经中国农业银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410363419.3/,转载请声明来源钻瓜专利网。
- 上一篇:一种西珠口服液及其制备方法
- 下一篇:在终端上进行音乐专属播放的方法和系统