[发明专利]数据管理方法及系统

说明书

技术领域

本发明涉及数据存储领域，特别涉及一种数据管理方法及系统。

背景技术

现有的元数据主要通过光盘和磁盘方式存储，其中，光盘主要用于移动存储，由于光盘相对磁介质具有更长的使用寿命，可以用来更长时间的保存归档数据，但光盘容量有限，访问速度较慢，不适合用作在线存储设备。磁盘是主要的在线存储设备，用来存储活跃的生产数据。

目前，对元数据的读写过程如图1所示，首先，文件系统向RAID(Redundant Array of Independent Disks，磁盘阵列)卡发起元数据读取请求，RAID卡计算定位元数据在磁盘阵列中所在位置，并向磁盘发起读取请求，磁盘读取元数据返回给RAID卡，RAID卡将元数据返回给文件系统。文件系统也可在现有元数据基础上发起写元数据请求，通过RAID卡将元数据写入磁盘。但是，由于元数据琐碎且写入频繁，易产生大量的磁盘碎片，对数据文件读写效率和磁盘使用寿命易产生影响，导致数据文件读写性能逐渐下降，当数据量比较大的时候，磁盘碎片的问题更加难以解决。

发明内容

基于此，有必要针对磁盘碎片量较大、数据文件读写性能低的问题，提供一种减小磁盘碎片且能提高数据文件读写性能的数据管理方法及系统。

一种数据管理方法，包括如下步骤：

对系统磁盘进行分区，划分单独存储分区；

设置与所述单独存储分区相对独立的磁盘阵列；

将待存储数据分离为元数据与数据文件；

将所述元数据存储于所述单独存储分区，将所述数据文件存储于所述磁盘阵列。

本发明还提供一种数据管理系统，包括：

分区模块，用于对系统磁盘进行分区，划分单独存储分区；

设置模块，用于设置与所述单独存储分区相对独立的磁盘阵列；

分离模块，用于将待存储数据分离为元数据与数据文件；

存储模块，用于将所述元数据存储于所述单独存储分区，将所述数据文件存储于所述磁盘阵列。

上述数据管理方法及系统，将待存储数据分离为元数据与数据文件，将元数据存储于单独存储分区，将数据文件存储于与单独存储分区相对独立的磁盘阵列，元数据和数据文件的分开存储。从而对元数据进行读取时，无需通过RAID卡向磁盘阵列发送读写请求，而是通过直接向系统磁盘发送元数据读写请求，减少写惩罚，根据元数据读写请求，进行元数据的读写。由于存储元数据的系统磁盘与存储数据文件的磁盘阵列是独立分开的，不但降低了磁盘阵列对元数据的存储压力，而且对元数据读写时，无需对存储数据文件的磁盘阵列进行访问，直接访问存储元数据的系统磁盘即可，没有索引文件等元数据的干扰，可大幅降低磁盘阵列的碎片，对数据文件读写效率和磁盘阵列使用寿命均有明显提升，有利于磁盘阵列保护。

附图说明

图1为现有的元数据读写原理图；

图2为一实施方式的数据管理方法的流程图；

图3为另一实施方式的数据管理方法的子流程图；

图4为另一实施方式的数据管理方法的子流程图；

图5为另一实施方式的数据管理方法的子流程图；

图6为另一实施方式的数据管理方法的子流程图；

图7为另一实施方式的数据管理方法的子流程图；

图8为另一实施方式的数据管理方法的子流程图；

图9为一实施方式的数据管理方法的元数据读写原理图；

图10为一实施方式的数据管理系统的模块图；

图11为另一实施方式的数据管理系统的子模块图；

图12为另一实施方式的数据管理系统的子模块图；

图13为另一实施方式的数据管理系统的子模块图；

图14为另一实施方式的数据管理系统的子模块图。

具体实施方式

请参阅图2，提供一种实施方式的数据管理方法，包括以下步骤：

S100：对系统磁盘进行分区，划分单独存储分区。

系统磁盘是指操作系统运行盘，元数据为描述数据的数据，主要是描述数据属性的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。在实际操作过程中，提供服务器，首先对服务器的系统磁盘进行分区，为存储元数据提供单独存储分区，将元数据存储在服务器的系统磁盘的单独存储分区。例如，在系统磁盘中划出200G的存储空间作为索引文件分区，即为元数据在系统磁盘中划分出了单独存储分区。

S200：设置与单独存储分区相对独立的磁盘阵列。