[发明专利]一种命名空间管理节点的启动方法和装置

说明书

本申请涉及一种命名空间管理节点的启动方法和装置，其中，该方法包括：接收启动请求，其中，启动请求用于请求启动命名空间管理节点；响应启动请求，根据命名空间管理节点所对应的元数据的数据信息创建多个加载线程；运行多个加载线程加载元数据；在元数据加载完成时，确定命名空间管理节点启动成功。本申请解决了相关技术中命名空间管理节点的启动效率较低的技术问题。

技术领域

本申请涉及计算机领域，尤其涉及一种命名空间管理节点的启动方法和装置。

背景技术

HDFS是当前主流的大数据存储系统，并且以集群的方式存在，一个HDFS集群中主要包括NameNode和DataNode两种组件，其中DataNode在HDFS中有多个，用于存储文件数据。NameNode最多有两个，但是只有一个是Active状态，另一个为standby状态，组成高可用(HA)的形式，NameNode(内存)中记录了HDFS中各个文件的元数据信息，例如：文件类型(文件or目录)，文件大小，文件实际存储在哪个DataNode上等等。

由于HDFS集群中同一时刻只有一个NameNode在提供服务，并且存储了整个文件系统中的全部元数据信息，在HDFS启动时，DataNode和NameNode同时启动，DataNode在启动必要的工作线程后，会立即向NameNode进行注册。NameNode会将所有的元数据信息载入内存，加载完毕后，整个集群才能对外提供服务，如果集群中存储的文件比较多(实际项目中一般会以亿为单位)，势必会延长NameNode的启动时间，导致整个集群启动时间延长。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本申请提供了一种命名空间管理节点的启动方法和装置，以至少解决相关技术中命名空间管理节点的启动效率较低的技术问题。

根据本申请实施例的一个方面，提供了一种命名空间管理节点的启动方法，包括：

接收启动请求，其中，所述启动请求用于请求启动命名空间管理节点；

响应所述启动请求，根据所述命名空间管理节点所对应的元数据的数据信息创建多个加载线程；

运行所述多个加载线程加载所述元数据；

在所述元数据加载完成时，确定所述命名空间管理节点启动成功。

可选地，根据所述命名空间管理节点所对应的元数据的数据信息创建多个加载线程包括：

获取所述数据信息，其中，所述数据信息包括：所述元数据中包括的数据分块的目标数量和每个数据分块的数据偏移量，所述目标数量为大于或者等于2的整数；

创建所述目标数量的所述加载线程，得到所述多个加载线程。

可选地，运行所述多个加载线程加载所述元数据包括：

并行运行所述目标数量的加载线程；

通过所述目标数量的加载线程中的每个加载线程，按照所述每个数据分块的数据偏移量加载元数据，其中，一个加载线程对应一个数据分块。

可选地，通过所述目标数量的加载线程中的每个加载线程，按照所述每个数据分块的数据偏移量加载元数据包括：

根据所述每个数据分块的数据偏移量确定所述每个加载线程在所述元数据中对应的目标数据分块；

通过所述每个加载线程加载所述目标数据分块的数据。

可选地，根据所述命名空间管理节点所对应的元数据的数据信息创建多个加载线程包括：

获取所述元数据所包括的多个数据段中每个数据段所划分的数据分块的数量；

为所述每个数据段创建与所述每个数据段所划分的数据分块的数量相同的加载线程。