[发明专利]一种分布式文件系统中读目录多页支持的方法及系统

说明书

本发明公开一种分布式文件系统中读目录多页支持的方法及系统，该方法包括：步骤1，客户端根据页索引号在本地页面缓存中查找保存目录项的待解析页，若存在，则解析出所述待解析页中的目录项信息，将解析出的所述目录项信息显示给用户，否则执行步骤2；所述步骤2，所述客户端向所述服务器发送读目录多页请求，等待所述服务器端返回给所述客户端请求的所述待解析页，所述客户端将所述待解析页保存在本地页面缓存中，并将解析出所述待解析页中保存的所述目录项信息显示给用户，其中所述待解析页为多个页。本发明能够发送一次请求获取多个保存目录项的页面，就减少了网络延迟时间的次数，从而减少了总的网络延迟时间。

技术领域

本发明涉及分布式文件系统客户端与服务器端的交互技术，特别涉及一种分布式文件系统中读目录多页支持的方法及系统。

背景技术

随着云计算、大数据、物联网等信息技术的高速发展，全球数据信息总量呈现爆炸式增长。根据IDC的统计，每年全球的数据总量以40％-60％的速度增长,2011年全球数据总量为1.8ZB(1021字节),预计到2020年,将到达35ZB，因此，对海量数据存储的需求日益迫切。

对于满足存储海量数据的分布式文件系统，元数据与数据分离的结构已成为一种主流架构，元数据和数据分别保存在专有的元数据存储设备和数据存储设备中，服务器端负责管理所有的元数据信息，采用带外访问方式，客户端根据先获取的元数据信息，可以直接访问专有的数据存储设备来读取信息。

读目录，目的是获取该目录下所有的目录项的名称、索引节点号、类型等元数据信息，以提供给用户该目录下的目录项列表。

目前的并行网络文件系统(pNFS)在首次读目录时，先在本地页面缓存中查找保存目录项信息的一页，如果本地页面缓存中没有，则向服务器端发送读目录请求获取该页，等待服务器端返回给客户端所请求的一页，客户端再逐个解析该页中的目录项，但是,当网络状况不佳,客户端首次读有大量目录项的大目录时，每次发送读目录请求只能获取一页，一页只能包含若干个目录项，导致读大目录时需要多次发送读目录请求，每发送一次读目录请求就有一次网络延迟时间,多次请求就有多次网络延迟时间,而且当网络延迟较大时,请求获取保存目录项的一页的时间白白浪费在了网络延迟上，尤其是在目录下目录项数量巨大的场景下,大量的时间浪费在了网络延迟上,增大了读目录操作的执行时间。

发明专利“针对文件系统的基于高速网络的消息传输框架和方法”，该发明提供一种针对文件系统的基于高速网络的消息传输框架和方法。该消息传输框架包括：文件系统接口层，用于向文件系统层提供创建通信上下文、建立连接通道、创建操作上下文及网络传输的接口；文件操作处理层，其分别与文件系统接口层和网络协议封装层通信，用于处理文件系统接口层提交的操作上下文，并提交网络通信操作给网络协议封装层；网络协议封装层，其与网络协议层通信，将文件操作处理层提交的网络通信操作进行封装后通过网络协议层执行消息传输。该发明将文件系统的上层操作和InfiniBand通信操作相匹配，最大化利用高速网络特性。但本发明涉及一种分布式文件系统客户端与服务器端的交互技术，客户端发送一次读目录请求获取多个页面到本地页面缓存，不同点在于该专利提出一种基于高速网络的消息传输框架和方法，并未涉及客户端与服务器端的交互技术。

发明内容

针对现有技术的不足，本发明提出一种分布式文件系统中读目录多页支持的方法及系统。

本发明提出一种分布式文件系统中读目录多页支持的方法，包括：

步骤1，客户端根据页索引号在本地页面缓存中查找保存目录项的待解析页，若存在，则解析出所述待解析页中的目录项信息，将解析出的所述目录项信息显示给用户，否则执行步骤2；

所述步骤2，所述客户端向所述服务器发送读目录多页请求，等待所述服务器端返回给所述客户端请求的所述待解析页，所述客户端将所述待解析页保存在本地页面缓存中，并将解析出所述待解析页中保存的所述目录项信息显示给用户，其中所述待解析页为多个页。