[发明专利]一种保持在线数据库磁盘空间的方法及系统

说明书

本发明涉及一种保持在线数据库磁盘空间的方法及系统，包括：配置数据表关系，数据表包括根表和子表；配置根表数据；配置子表数据；根据数据表关系对数据进行数据备份操作，得到备份完成的数据；根据数据表关系对数据进行数据清理操作；根据根表与子表关联结构将清理的数据进行数据恢复操作；根据数据表关系对数据进行数据删除操作。本发明一种保持在线数据库磁盘空间的方法及系统通过平衡数据增量和删除保存周期外的数据，保障空间维持在稳定水平，使系统达到可持续使用的目标。还可以有效避免系统扩展库表数量，也可减少关系型数据库磁盘的非必要扩展。

技术领域

本发明涉及数据库技术领域，尤其涉及一种保持在线数据库磁盘空间的方法及系统。

背景技术

在互联网应用系统中，为了应对大数据量的储存空间及查询效率，普遍采用支持事务的关系型数据库的分库分表的方案来处理。但此方案只是提高了数据容纳上限，依然存在数据储存上限。在日积月累的数据积累下，分库分表的数据库系统也会逐渐达到存储上限，届时系统依然会可不用。

发明内容

为解决现有技术的不足，本发明提出一种保持在线数据库磁盘空间的方法及系统，通过插件化为各子系统提供数据清理能力，后台配置实时实现数据表关系的维护，中间不需要侵入子系统，节省时间，子系统无感知，避免系统的不稳定的现象。

为实现以上目的，本发明所采用的技术方案包括：

一种保持在线数据库磁盘空间的方法，其特征在于，包括：

配置数据表关系，数据表包括根表和子表；

配置根表数据；

配置子表数据；

根据数据表关系对数据进行数据备份操作，得到备份完成的数据，包括：

读取数据表数据，将数据表数据处理成多叉树结构，将每个根节点加入到列表中，形成森林集合；

遍历森林集合中的每一颗树，根据配置的约束条件，对每棵树的根节点，分批次查询根表数据；

根据根表数据提取对应的子表数据，进行本批次的数据备份；

完成对森林集合的遍历，对所有满足需备份根数据条件的数据进行备份，得到备份完成的数据；

根据数据表关系对数据进行数据清理操作；

根据根表与子表关联结构将清理的数据进行数据恢复操作；

根据数据表关系对数据进行数据删除操作。

进一步地，还包括：将数据表关系更新到数据表中。

进一步地，配置根表数据包括：设置约束条件；约束条件包括：需备份根数据条件以及过滤条件。

进一步地，配置子表数据包括：设置子表名、父级依赖以及关联字段。

进一步地，根据数据表关系对数据进行数据清理操作，包括：

根据预设的清理时间扫描备份完成的数据；

判断是否存在预设的业务空闲时间；

若存在预设的业务空闲时间，则根据预设的业务空闲时间进行高速的数据清理；

若不存在预设的业务空闲时间，则全时间段进行低速的数据清理；

记录清理的数据条数、清理状态以及清理时间。

进一步地，根据根表与子表关联结构将清理的数据进行数据恢复操作，包括：根据是否存在预设的业务空闲时间进行限速处理。

进一步地，根据数据表关系对数据进行数据删除操作，包括：