[发明专利]基于分级存储的分布式文件系统实现方法

摘要

本发明涉及一种基于分级存储的分布式文件系统实现方法，包括以下步骤1)对系统中的数据采用全局统一命名空间，建立无元数据服务的分布式文件系统；2)将整个分布式文件系统根据业务需要划分为不同的逻辑分区；3)对不同的逻辑分区选用不同的存储介质和存储方式；4)逻辑分区间的数据实现自动迁移，并对迁移后的数据进行数据重定位。与现有技术相比，本发明具有数据访问完全并行化、性能好、硬件成本低等优点。

主权项

一种基于分级存储的分布式文件系统实现方法，其特征在于，包括以下步骤：1)对系统中的数据采用全局统一命名空间，建立无元数据服务的分布式文件系统；2)将整个分布式文件系统根据业务需要划分为不同的逻辑分区；3)对不同的逻辑分区选用不同的存储介质和存储方式；4)逻辑分区间的数据实现自动迁移，并对迁移后的数据进行数据重定位；所述的不同的逻辑分区包括高速集群逻辑分区、半活动集群逻辑分区和低速集群逻辑分区；所述的逻辑分区间的数据实现自动迁移具体为：41)数据使用信息模块采集文件的使用频率、文件的大小、文件所处的逻辑分区信息；42)数据迁移管理模块根据数据使用信息模块采集信息和用户设定的迁移策略，触发对数据的迁移操作；43)数据迁移执行模块完成对数据的迁移；所述的数据迁移管理模块根据数据使用信息模块采集信息和用户设定的迁移策略，触发对数据的迁移操作具体为：①在高速集群逻辑分区中设置容量迁移阀值，当容量达到阀值时，开始启动迁移；②首先需要考虑数据的使用频度，根据LRU算法准备迁移数据，其次需要考虑数据迁移的成本，迁移算法具体为：迁移值＝使用频率*权重A1‑文件大小*权重B1；③对于半活动集群逻辑分区或低速集群逻辑分区的数据若经常被访问，需要考虑数据回迁，数据回迁的策略值为：回迁值＝文件所在区间*权重A2+上级区间所剩空间*权重B2。