[发明专利]一种数据存储生命周期管理方法及系统

说明书

本发明提供的一种数据存储生命周期管理方法及系统，该方法包括：获取生命周期操作指令；根据生命周期操作指令获取待执行数据对象，并将各待执行数据对象进行合并，生成待传输数据；根据生命周期操作指令对待传输数据进行数据传输。通过将各待执行数据对象进行数据合并处理，将合并后的待传输数据进行数据传输，优化了数据传输方式，提高了数据传输效率。

技术领域

本发明涉及大数据存储和蓝光存储领域，具体涉及一种数据存储生命周期管理方法及系统。

背景技术

在现有的Amazon S3分布式系统中，针对存储对象在大吞吐量的数据传输或存储类型转换提出了专门的性能优化策略，以提高数据传输效率。但是现有的性能优化策略只能实现存储对象大小在MB级、GB级，甚至TB级的数据处理，而当存储空间中存储有大量的、内容较少的、KB级别的对象，当用户需要将这些对象进行数据传输时，现有的Amazon S3分布式系统会出现并发数据传输拥堵，影响数据传输效率。

发明内容

因此，本发明要解决的技术问题在于克服现有技术中在数据传输效率低的缺陷，从而提供一种对象存储生命周期管理方法及系统。

为达到上述目的，本发明提供如下技术方案：

第一方面，本发明实施例提供一种数据存储生命周期管理方法，包括：获取生命周期操作指令；根据所述生命周期操作指令获取待执行数据对象，并将各待执行数据对象进行合并，生成待传输数据；根据所述生命周期操作指令对所述待传输数据进行数据传输。

在一实施例中，所述获取生命周期操作指令，包括：获取生命周期请求报文；对所述生命周期请求报文进行解析，生成所述生命周期操作指令。

在一实施例中，所述根据所述生命周期操作指令获取待执行数据对象，包括：获取当前存储的数据对象；根据各所述数据对象的大小进行排序，根据所述生命周期操作指令筛选出预设级别范围内的待执行数据对象。

在一实施例中，所述根据所述生命周期操作指令对所述待传输数据进行数据传输，包括：获取所述待传输数据的原存储地址；根据所述生命周期操作指令确定所述待传输数据的目的存储地址；根据所述原存储地址和所述目的存储地址，对所述待传输数据进行数据传输。

在一实施例中，数据存储生命周期管理方法，还包括：根据所述生命周期操作指令及数据传输结果生成生命周期管理过程信息。

在一实施例中，数据存储生命周期管理方法，还包括：获取当前数据对象的访问频率；根据所述访问频率调整当前数据对象的存储模式。

在一实施例中，所述根据所述访问频率调整当前数据对象的存储模式，包括：当所述访问频率大于预设访问频率时，将所述当前数据对象存储至预设频繁访问层；当所述访问频率不大于预设访问频率时，将所述当前数据对象存储至预设不频繁访问层。

第二方面，本发明实施例提供一种数据存储生命周期管理系统，包括：获取模块，用于获取生命周期操作指令；处理模块，用于根据所述生命周期操作指令获取待执行数据对象，并将各待执行数据对象进行合并，生成待传输数据；传输模块，用于根据所述生命周期操作指令对所述待传输数据进行数据传输。

第三方面，本发明实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使所述计算机执行本发明实施例第一方面所述的数据存储生命周期管理方法。

第四方面，本发明实施例提供一种计算机设备，包括：存储器和处理器，所述存储器和所述处理器之间互相通信连接，所述存储器存储有计算机指令，所述处理器通过执行所述计算机指令，从而执行本发明实施例第一方面所述的数据存储生命周期管理方法。

本发明技术方案，具有如下优点：