[发明专利]一种自动实现分层存储的方法和管理分层存储的系统

说明书

技术领域

本发明涉及数据存储技术，特别是指一种自动实现分层存储的方法和管理分层存储的系统。

背景技术

选择存储技术通常需要在超高容量、低成本和低性能，以及，高度先进的数据管理功能和极高的性能之间进行平衡。随着容量的增长，手动迁移数据太费时，有限的人力资源使存储管理员精疲力竭，分层存储成为一种必需的选择架构，其可以综合容量、数据管理的能力、功能、性能，以及价格等因素，提供性价比最优的存储方案以实现上述的平衡。

分层存储如果设计和实施得当，可通过部署能够迁移数据或应用程序并对其生命周期需求做出响应的工具来降低管理成本，并且像管理单层架构一样对分层存储进行管理。分层存储提升存储效率的同时，减少使用昂贵存储设备，将相对不常访问的数据由昂贵的固态硬盘或者光纤磁盘设备无缝迁移到相对廉价的串行高级技术附件(SATA，Serial Advanced Technology Attachment)盘或者串行连接SCSI(SAS，Serial Attached SCSI)盘上。

存储供应商公布了或者提供了各种分层存储的解决方案。许多供应商的分层解决方案实际上都是仅含磁盘的策略，只是纳入了具有不同RPM速度和价格范围的磁盘产品。

现有技术存在如下问题：很少有供应商实际提供包含高性能固态磁盘(SSD)、磁盘阵列(RAID)和归档磁带在内的全面的分层存储技术，目前的自动分层存储不能提供实时的管理功能，非破坏性的迁移大量数据会耗费过多的时间和资源。

发明内容

本发明要解决的技术问题是提供一种自动实现分层存储的方法和管理分层存储的系统，解决现有技术中，自动分层存储不能提供实时的管理功能，导致非破坏性的迁移大量数据会耗费过多的时间和资源的缺陷。

为解决上述技术问题，本发明的实施例提供一种自动实现分层存储的方法，分层存储单元包括支持不同存取速度的存储层，存储设备包括多个磁盘区块；方法包括：在一个时间区间内不间断跟踪并统计各个磁盘区块的存取频率，定期动态分析出存取频率大于第一阈值的热区块和存取频率小于第二阈值的冷区块；将所述热区块中的数据迁移到高速存储层，将冷区块中的数据迁移到低速存储层。

所述的方法中，在一个时间区间内不间断跟踪与统计各个磁盘区块的存取频率包括：所述一个时间区间具体是业务低峰时段，在业务低峰时段内，周期性跟踪对各个磁盘区块的存取操作，统计出存取操作的频率作为存取频率。

所述的方法中，磁盘区块的存取频率包括：磁盘区块的存入频率，磁盘区块的读出频率。

所述的方法中，周期性跟踪对各个磁盘区块的存取操作，统计出存取操作的频率作为所述存取频率包括：在每一个周期内，同时统计各个磁盘区块的存入频率和读出频率，存入频率和读出频率的和值作为一个周期内的当前存取频率，将各个周期统计出的所述当前存取频率进行累加后再进行平均计算得到所述存取操作的存取频率。

所述的方法中，存储设备包括多个磁盘区块，具体包括：将存储设备中的磁盘划分为若干个逻辑上的磁盘区块，每一个磁盘区块的容量符合精细度的规定。

所述的方法中，定期动态分析出存取频率大于第一阈值的热区块和存取频率小于第二阈值的冷区块包括：在业务低峰时段内，周期性根据统计出的存取频率分析出热区块与冷区块。

所述的方法中，将热区块中的数据迁移到高速存储层，将冷区块中的数据迁移到低速存储层，之前还包括：建立热区块到高速存储层之间的多路径传输链路，建立冷区块到低速存储层之间的多路径传输链路。

一种实现分层存储的系统，包括：分层存储单元，包括支持不同存取速度的存储层；存储设备，包括多个磁盘区块；数据收集与分析模块，用于在一个时间区间内不间断跟踪并统计各个磁盘区块的存取频率，定期动态分析出存取频率大于第一阈值的热区块和存取频率小于第二阈值的冷区块；数据迁移模块，用于将所述热区块中的数据迁移到高速存储层，将冷区块中的数据迁移到低速存储层。

所述的系统中，还包括：存储虚拟化模块，与存储设备连接，用于将存储设备中的磁盘划分为若干个逻辑上的磁盘区块，每一个磁盘区块的容量符合精细度的规定。

所述的系统中，还包括：数据收集与分析模块包括：跟踪统计单元，用于设定所述一个时间区间具体是业务低峰时段，并在业务低峰时段内，周期性跟踪对各个磁盘区块的存取操作，统计出存取操作的频率作为所述存取频率；分析单元，用于在业务低峰时段内，周期性根据统计出的存取频率分析出热区块与冷区块。