[发明专利]面向超大规模系统的多文件系统元数据统一缓存管理方法

权利要求书

1.一种面向超大规模系统的多文件系统元数据统一缓存管理方法，其特征在于：基于以下模块：

若干个分布式文件系统，用于存储和管理数据资源；

若干个节点元数据缓存管理模块，被分别配置于分布式文件系统中的IO节点上，用于监控文件系统中元数据信息的变化，并将获取的元数据信息，包括新创建的文件的元数据信息、原来已有文件的元数据信息和变化或删除后的文件的元数据信息，传输至元数据信息库；

元数据信息库，用于接收和存储各个分布式文件系统上的节点元数据缓存管理模块所获取的元数据信息；

配置于管理节点上的元数据缓存总控模块，用于通过访问存储系统，查询元数据信息库，获取元数据的信息，并通过元数据信息识别数据的存放位置，实现对数据的查找和定位；

包括以下步骤：

S1、在任意一个分布式文件系统中执行创建文件、改写文件或删除文件的操作时，此分布式文件系统的IO节点上的节点元数据缓存管理模块对所述操作进行监控，并将操作的结果记录到元数据信息库中；

S2、元数据信息库存储发生在所述分布式文件系统上的元数据信息变化，将原来的元数据信息更新为操作完成后的新的元数据信息，形成与执行所述操作的分布式文件系统的元数据信息一致的元数据信息的数据库，即元数据信息库；

S3、当用户通过应用程序对整个系统中的数据进行操作时，访问元数据信息库，获取到数据的元数据信息，并根据元数据信息解析获得该数据的物理存储位置；

S4、根据数据的物理存储位置，确定对数据的访问路径，并根据操作指令，对数据进行相关操作。

2.根据权利要求1所述的面向超大规模系统的多文件系统元数据统一缓存管理方法，其特征在于：所述若干个分布式文件系统包括GFS文件系统、HDFS文件系统、Lustre文件系统、Ceph文件系统和TFS文件系统。

3.根据权利要求1所述的面向超大规模系统的多文件系统元数据统一缓存管理方法，其特征在于：所述元数据信息包括数据的属主信息、数据的大小信息、数据的创建时间信息、数据的修改时间信息、数据的存放位置信息和数据的类型信息。

4.根据权利要求1所述的面向超大规模系统的多文件系统元数据统一缓存管理方法，其特征在于：所述文件系统包括分布式文件系统和节点上的本地文件系统。