[发明专利]适用于云存储的智能配置存储备份方法

说明书

技术领域

本发明涉及云存储领域，特别涉及一种适用于云存储的策略驱动的智能配置存储备份方法。

背景技术

云存储是在云计算(cloud computing)概念上延伸和发展出来的一个新的概念，是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个系统。 当云计算系统运算和处理的核心是大量数据的存储和管理时，云计算系统中就需要配置大量的存储设备，那么云计算系统就转变成为一个云存储系统，所以云存储是一个以数据存储和管理为核心的云计算系统。

如今磁盘备份设备的容量已经趋于饱和，数据中心已经没有足够的空间来备份PT级的数据。在这种情况下，当我们希望将备份数据保存一个月时，却只能保存两到三天。问题的根源在于备份设备中总是充斥着大量的冗余数据。为了解决这个问题，节省更多空间，“重复数据删除”技术便顺理成章地成了人们关注的焦点。采用“重复数据删除”技术可以将存储的数据缩减为原来的1/20，从而让出更多的备份空间，不仅可以使磁盘上的备份数据保存更长的时间，而且还可以节约离线存储时所需的大量的带宽。

存在于数据重复删除中的风险是，如果重复数据删除系统错误地把两个不同数据块识别成含有相同数据的块，当它们不被存储时，数据块被错误识别的这个文件会被破坏。更大的风险是来自硬件故障的灾难性的数据损失。因为任何特定的备份工作的数据实事上是任何特定的大文件被切成块，分散在整个重复数据删除设备中，它不关心你备份了那个服务器多少次，如果你在重复删除设备中损失了一个RAID设置，你会损失很多数据。

本发明旨在研究动态且非破坏性的迁移功能，提供了不同级别存储的数据迁移功能。实现这一流程自动化对于减轻存储管理员负担和最大限度降低故障风险来说十分重要。

发明内容

针对现有重复数据删除中存在的缺陷与问题，申请人进行了改进研究，提供一种适用于云存储的智能配置存储备份方法，通过将数据去重压缩分层存储，从而提高数据去重率和系统性能占用率性价比，优化存储资源配置。

本发明的技术方案如下：

一种适用于云存储的智能配置存储备份方法，根据用户需求选定存储备份策略，所述存储备份策略包括分层存储子策略以及效率性能子策略；根据分层存储子策略对待备份文件进行分类，根据效率性能子策略对待备份文件进行文件级或数据块级的重复数据删除并进一步压缩；根据分层存储子策略把文件转移到不同级别的存储上，同时保留指向存储地的索引指针；检查文件以前的备份状态，把处理后的文件备份至备份设备，完成备份同步。

具体步骤如下：

1）选定策略，根据用户需求选定存储备份策略，系统根据历史数据给出分析数据，用户依照所述分析数据做出策略调整；

2）文件分类，判断文件是否符合分层存储条件，如果该文件符合分层存储条，则进入步骤3）；如果该文件不符合分层存储条件，则进入步骤6）；

3）对符合分层存储条件的文件，检查其是否做过分层存储，如果该文件未做过分层存储，则进入重复数据删除子程序，重复数据删除子程序结束后进入步骤4）；如果该文件已经做过分层存储，则过程结束；

4）分层存储，根据数据的重要程度不同将数据分开存储至不同存储，重要的数据存放至高性能、高安全性的存储层，不重要的数据存放至低级存储层；

5）同步备份，检查备份设备有无此文件，如果没有，则备份该文件至备份设备；如果已有此文件，则不用操作；

6）对不符合分层存储条件的文件，检查其有无历史备份，如果已有备份，则过程结束；如果无备份，则进入步骤7）；

7）根据策略对数据块大小的限定，检查文件尺寸是否小于数据块大小，如果文件尺寸小于数据块尺寸，则进入步骤5）；如果文件尺寸大于等于数据块尺寸，则进入重复数据删除子程序，重复数据删除子程序结束后进入步骤5）；

8）过程结束。

其进一步的技术方案为：所述步骤1）中用户设置的存储备份策略包括分层存储子策略以及效率性能子策略：

所述分层存储子策略是根据分层备份需求和备份环境，设置以下参数：

A．指定文件被访问的频率，在此频率以下的所有文件与其余文件实行不同级别存储的数据迁移；

B．指定文件的路径，在此路径下的所有文件与其余文件实行不同级别存储的数据迁移；

C．指定文件的类型，对所有该类型的文件与其余文件实行不同级别存储的数据迁移；

所述效率性能子策略是根据备份的性能效率需求，设置以下参数：