[发明专利]冷热数据转换存储方法、装置、计算机设备及存储介质

说明书

本申请公开了一种冷热数据自动转换存储方法，应用于数据库技术领域。本申请提供的方法包括：从目标数据库的从库中获取待分析SQL脚本对应数据的数据表的表名和第一主键值；若获取所述表名和所述第一主键值成功，则将所述表名和所述第一主键值存入预设的键值数据库中；获取主键值集合，其中，所述主键值集合的第二主键值是从所述目标数据库的从库中获得的；判断所述主键值集合中的每个所述第二主键值是否在所述键值数据库中存在，若不存在，则从所述目标数据库的主库中获取所述第二主键值对应的第一行数据；将所述第一行数据转存至预设的非关系型数据库，并从所述目标数据库的主库中删除所述第一行数据。

技术领域

本申请涉及数据库技术领域，尤其涉及一种冷热数据自动转换存储方法、装置、计算机设备及存储介质。

背景技术

企业数据随着业务的增长会日渐庞大，管理成本和管理风险也随之增大。其中，企业数据中的部分数据在产生之后很难辨别是否后续仍然需要使用，传统技术的方法是对企业数据按照时间进行归档，默认只查询某些时间范围内的数据，即把对应时间范围内的数据作为热数据，其他数据作为冷数据被按照时间进行归档，并使用不同成本的存储介质存储冷数据和热数据。

但是在实际的业务场景中，按照时间划分冷数据和热数据存在诸多缺陷，例如部分冷数据在一段时间内的被查询频率提升，则该部分冷数据应该被转化成热数据，而在该段时间结束后又被转化成冷数据，即传统技术未按照使用频率对保存在数据库中的数据进行冷数据和热数据的自动转换存储。

发明内容

本申请实施例提供一种冷热数据自动转换存储方法、装置、计算机设备及存储介质，以解决传统技术未按照使用频率对保存在数据库中的数据进行冷数据和热数据的自动转换存储的问题。

本申请的第一方面，提供一种冷热数据自动转换存储方法，包括：

从目标数据库的从库中获取待分析SQL脚本对应数据的数据表的表名和第一主键值；

若获取所述表名和所述第一主键值成功，则将所述表名和所述第一主键值存入预设的键值数据库中，其中，所述键值数据库中的每一键值对的键为所述表名，值为所述第一主键值；

获取主键值集合，其中，所述主键值集合的第二主键值是从所述目标数据库的从库中获得的；

判断所述主键值集合中的每个所述第二主键值是否在所述键值数据库中存在，若不存在，则从所述目标数据库的主库中获取所述第二主键值对应的第一行数据，其中，所述第一行数据为冷数据；

将所述第一行数据转存至预设的非关系型数据库，并从所述目标数据库的主库中删除所述第一行数据。

本申请的第二方面，提供一种冷热数据自动转换存储装置，包括：

第一数据获取模块，用于从目标数据库的从库中获取所述待分析SQL脚本对应数据的数据表的表名和第一主键值；

第一条件处理模块，用于若获取所述表名和所述第一主键值成功，则将所述表名和所述第一主键值存入预设的键值数据库中，其中，所述键值数据库中的每一键值对的键为所述表名，值为所述第一主键值；

主键值集合模块，用于获取主键值集合，其中，所述主键值集合的第二主键值是从所述目标数据库的从库中获得的；

第一行数据获取模块，用于判断所述主键值集合中的每个所述第二主键值是否在所述键值数据库中存在，若不存在，则从所述目标数据库的主库中获取所述第二主键值对应的第一行数据，其中，所述第一行数据为冷数据；

第一行数据处理模块，用于将所述第一行数据转存至预设的非关系型数据库，并从所述目标数据库的主库中删除所述第一行数据；