[发明专利]PostgreSQL数据库海量数据管理方法及系统有效
申请号: | 201610195454.8 | 申请日: | 2016-03-31 |
公开(公告)号: | CN105893531B | 公开(公告)日: | 2019-07-23 |
发明(设计)人: | 肖建桥;胡志勇;叶仕祥;蔡剑峰;肖伟明;余道敏 | 申请(专利权)人: | 武汉虹信技术服务有限责任公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F3/06 |
代理公司: | 武汉科皓知识产权代理事务所(特殊普通合伙) 42222 | 代理人: | 严彦 |
地址: | 430073 湖北省武汉市武汉东湖*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种PostgreSQL数据库海量数据管理方法及系统,基于Linux平台实现,包括海量存储管理配置初始化,启动系统定时调度;对预留时间段外的过期数据分区进行删除,然后对未过期数据分区中,预留时间段内与实际保存周期外的分区数据进行清理;存储空间检查,判断存储空间是否支持预扩展,支持则执行分区预扩展操作和索引创建,否则触发自适应精减机制。本发明保证了数据的有效性、可用性和可扩展性,为数据扩容提供了数值依据,有效提升数据库管理人员的维护效率,大大降低数据库的管理维护成本,具有重要的市场价值。 | ||
搜索关键词: | postgresql 数据库 海量 数据管理 方法 系统 | ||
【主权项】:
1.一种PostgreSQL数据库海量数据管理方法,基于Linux平台实现,其特征在于:通过数据自适应精减调整机制,缩短数据存储周期、清理过期数据,以达到表空间可扩展目的,实现过程包括以下步骤,步骤1‑1,海量存储管理配置初始化,包括初始化表空间配置表、存储设备配置表、表对象配置表、索引对象配置表以及系统配置表;所述表对象配置表包括序列号、表名称、分区类型、实际保存周期、优先级别、预计保存周期、分区标识列、预扩展分区数,通过提取数据库中自定义海量表对象信息,包括表对象的分区类型、允许数据分区数、允许保留分区数、允许删除的优先级的信息,完成表对象配置表的初始化配置操作;步骤1‑2,启动系统定时调度,通过Linux系统Crond服务,配置实现数据库管理调度机制;步骤1‑3,历史数据清理,包括对预留时间段外的过期数据分区进行删除,然后对未过期数据分区中,预留时间段内与实际保存周期外的分区数据进行清理;步骤1‑4,存储空间检查,判断存储空间是否支持预扩展,包括将表空间使用率与自适应精减调整的触发阈值进行比较,若该值小于触发阈值,则支持,直接进入步骤1‑5,若该值大于等于触发阈值,则触发自适应精减机制,完成数据配置的一次缩减,返回执行步骤1‑3,若执行N次缩减操作后表空间使用率仍然大于等于触发阈值,则直接生成告警记录退出整个流程;N为预定的次数上限;所述自适应精减机制,是指数据自适应精减调整,包括按照表对象配置的存储优先级、存储周期的大小,均衡缩短存储周期,其中存储周期最小单位为天;步骤1‑5,执行分区预扩展操作和索引创建,包括通过调用数据库函数接口,完成对象表中表对象的分区扩展,并完成扩展分区上的索引创建;步骤1‑6,处理流程结束。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉虹信技术服务有限责任公司,未经武汉虹信技术服务有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610195454.8/,转载请声明来源钻瓜专利网。
- 上一篇:一种可识别电线箱
- 下一篇:一种读写分离的HBase入库方法