[发明专利]分布式存储数据检索方法、系统、装置及可读存储介质

说明书

本申请公开了一种分布式存储数据检索方法、系统、装置及计算机可读存储介质，在分布式存储系统存储文件时生成文件ID，生成包括各个硬盘存储区域和硬盘类型的硬盘ID，并分别利用文件名和硬盘的唯一标识作为标记，通过文件ID的文件ID哈希值和硬盘ID的硬盘ID哈希值进行初步比较，实现首次的快速筛选，再利用文件ID中的存储空间类型和硬盘ID中的硬盘类型确定文件是否在硬盘ID所对应的存储区域中，当文件存储在硬盘ID所对应的存储区域中，可以利用文件ID中记载的文件的偏移地址快速查找到文件，提升了文件检索速度，实现了快速检索，同时，设置硬盘ID，使得在文件进行保存时通过设置存储空间类型，可以选择存储的硬盘类型。

技术领域

本发明涉及分布式存储领域，特别涉及一种分布式存储数据检索方法、系统、装置及计算机可读存储介质。

背景技术

现有技术中，用户需要不同存储性能以存储相关数据，对于数据库、数据归档等场景依赖于高性能的存储空间，而对于计算场景应用或网络场景应用中，只需要中、低性能的存储空间即可。

在Ceph(分布式文件系统)或其他存储管理中，一般都会采用创建不同性能的存储池，每类存储池都是由相同的存储介质资源组成，在不同的存储池上创建相应的存储资源即可得到不同的存储性能空间。

由于分布式存储管理系统是由多个存储设备拼凑而成，用户在使用时存储的数据又是分散且随机的存储，因此，在用户进行调用读取时，对存储的文件进行检索相较于一般的存储系统需要消耗更多的检索资源，检索速度过慢越来影响到用户的使用体验。

为此，需要一种快速的分布式存储数据检索方法。

发明内容

有鉴于此，本发明的目的在于提供一种分布式存储数据检索方法、系统、装置及计算机可读存储介质，提高检索速度。其具体方案如下：

一种分布式存储数据检索方法，包括：

S11：接收文件的文件名；

S12：利用所述文件名查找到相应的文件ID，所述文件ID包括所述文件名、所述文件的存储空间类型和所述文件在硬盘中的偏移地址；

S13：计算所述文件ID的文件ID哈希值；

S14：利用所述文件ID哈希值在依序排列的硬盘ID哈希值中，按序查找大于所述文件ID哈希值的目标硬盘ID哈希值；其中，硬盘ID哈希值为硬盘ID的哈希值，硬盘ID包括硬盘的硬盘类型、唯一标识和存储区域；

S15：判断所述文件ID中的存储空间类型与目标硬盘ID中的硬盘类型是否一致；

S16：若一致，则在所述目标硬盘ID对应的存储区域中利用所述文件ID中的所述偏移地址查找所述文件；

S17：若不一致，则返回S14按序查找下一个大于所述文件ID哈希值的目标硬盘ID哈希值，直至无下一个大于所述文件ID哈希值的目标硬盘ID哈希值。

可选的，所述利用所述文件ID哈希值在依序排列的硬盘ID哈希值中，按序查找大于所述文件ID哈希值的目标硬盘ID哈希值的过程，包括：

利用所述文件ID哈希值在包括依序均匀排列的硬盘ID哈希值的DHT哈希环中，按序查找大于所述文件ID哈希值的目标硬盘ID哈希值。

可选的，所述硬盘ID的生成过程，包括：

对硬盘按照预设的切分规则，进行切分，得到多个存储区域，为每个存储区域分配相应的标记；

利用硬盘的硬盘类型、唯一标识和存储区域的标记，生成包括硬盘的硬盘类型、唯一标识和存储区域的硬盘ID。

可选的，所述文件ID的生成过程，包括：

接收所述文件、所述文件的文件名和存储空间类型；