[发明专利]基于热表动态优先调度的数据快速清理方法有效
申请号: | 201410264994.8 | 申请日: | 2014-06-13 |
公开(公告)号: | CN104036001B | 公开(公告)日: | 2017-05-10 |
发明(设计)人: | 程永新;宋辉;杨志洪 | 申请(专利权)人: | 上海新炬网络信息技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 上海科律专利代理事务所(特殊普通合伙)31290 | 代理人: | 金碎平 |
地址: | 200063 上海市普*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 动态 优先 调度 数据 快速 清理 方法 | ||
1.一种基于热表动态优先调度的数据快速清理方法,其特征在于,包括如下步骤:
a)增加数据库表对象的数据清理周期,并将数据清理周期同步至数据库的管理参数表;
b)根据管理参数表的数据清理周期对各种类型数据库表进行比对,如果不在清理范围则对表进行剔除,并自动生成清理对象明细和清理脚本;
c)部署数据库表访问频率采集脚本,实时统计SQL中各数据表的访问频率变化;根据各数据表的访问频率进行排序,动态确定清理对象明细中的热表,并对热表进行优先调度;
d)进行历史数据备份,备份后若数据比对一致则进行数据清理;
所述步骤b)包括如下过程:
b1)通过任务调度获取指定表空间,通过命名规则检查后,根据管理参数表中该指定表空间的数据清理周期,生成可清理日期;
b2)对于普通数据表,直接根据该数据表的数据清理周期判断是否有可清理数据,如果有则生成清理脚本,如果没有则结束;
b3)对于手工分表,则通过正则表达式生成需要清理表,判断是否有可清理数据,如果有则生成清理脚本,如果没有则结束;
b4)输出清理对象明细和清理对象脚本。
2.如权利要求1所述的基于热表动态优先调度的数据快速清理方法,其特征在于,所述步骤a)中还包括增加数据库表对象的DELETE、TRUNCATE、PARTITION_TABLE清理方式和保留时间、清理字段、字段类型的清理条件,并同步至数据库的管理参数表。
3.如权利要求1所述的基于热表动态优先调度的数据快速清理方法,其特征在于,所述步骤b1)中默认表空间为全库数据表空间。
4.如权利要求1所述的基于热表动态优先调度的数据快速清理方法,其特征在于,所述步骤c)采用非抢占式调度算法对热表进行优先调度。
5.如权利要求1所述的基于热表动态优先调度的数据快速清理方法,其特征在于,所述步骤d)包括如下过程:
d1)根据热表优先调度算法生成的表顺序进行自动化备份;
d2)判断清理表的类型,如果是手工分表或日期分区表,则通过数据泵导入历史库备份整表或需要清理分区,数据比对无差异后进行清理;
d3)如果清理表类型为DELETE表,采用rowid方式生成关联中间表后,再通过数据泵导入历史库备份关联中间表,数据比对无差异后进行清理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海新炬网络信息技术有限公司,未经上海新炬网络信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410264994.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电池仓
- 下一篇:一种多功能防盗蓄电池