[发明专利]一种NAMENODE文件系统的管理方法、装置及设备

说明书

本发明公开了一种NAMENODE文件系统的管理方法，通过接收大数据信息；根据所述大数据信息，通过iSCSI协议对备份节点的存储空间进行读写，并根据所述大数据信息更新主节点日志信息；使所述从NAMENODE节点根据所述主节点日志信息确定所述从NAMEDOBE节点的从节点日志信息；当主NAMENODE节点故障时，使所述从NAMENODE节点根据所述从节点日志信息及所述大数据信息，通过iSCSI协议对所述备份节点的存储空间进行读写，并更新所述从节点日志信息。本发明降低了系统建构的设备成本，保证系统的高可用性。本发明同时还提供了一种具有上述有益效果的NAMENODE文件系统的管理装置、设备及计算机可读存储介质。

技术领域

本发明涉及计算机存储高可用技术领域，特别是涉及一种NAMENODE文件系统的管理方法、装置、设备及计算机可读存储介质。

背景技术

在多种用于大数据的文件管理系统中，NAMENODE管理文件系统的命名空间。它维护着文件系统树及整棵树内所有的文件和目录。这些信息以两个文件形式永久保存在本地磁盘上：命名空间镜像文件和编辑日志文件。NAMENODE也记录着每个文件中各个块所在的数据节点信息，而在现有技术中，NAMENODE文件系统需要单独的高速存储服务器(如支持NFS功能的共享存储)作为大数据的存储设备，而高速存储服务器的价格高昂，与大数据平台构架于低成本的普通服务器，以降低成本的初衷相违背，此外，由于现有技术中的NAMENODE节点与上述高速存储服务器之间的数据交换会挤占用于服务器间数据交换的协议的带宽，因此在高负载下，容易出现带宽不足，进而导致系统崩溃的问题。

因此，找到一种避免使用高速存储服务器的NAMENODE文件系统的管理方法，以降低设备成本，并解决现有NAMENODE文件系统在高负载下可用性不高的问题，是本领域技术人员亟待解决的问题。

发明内容

本发明的目的是提供一种NAMENODE文件系统的管理方法、装置、设备及计算机可读存储介质，以解决现有技术中NAMENODE系统由于成本高、高负载下容易出现带宽不足，导致系统整体可用性低下的问题。

为解决上述技术问题，本发明提供一种NAMENODE文件系统的管理方法，包括：

接收大数据信息；

根据所述大数据信息，通过iSCSI协议对备份节点的存储空间进行读写，并根据所述大数据信息更新主节点日志信息；

将所述主节点日志信息发送至从NAMENODE节点，使所述从NAMENODE节点根据所述主节点日志信息确定所述从NAMEDOBE节点的从节点日志信息；

当主NAMENODE节点故障时，激活所述从NAMENODE节点，使所述从NAMENODE节点根据所述从节点日志信息及所述大数据信息，通过iSCSI协议对所述备份节点的存储空间进行读写，并更新所述从节点日志信息。

可选地，在所述的NAMENODE文件系统的管理方法中，所述根据所述大数据信息，通过iSCSI协议对备份节点的存储空间进行读写，并根据所述大数据信息更新主节点日志信息包括：

获取所述备份节点的iSCSI设备名称信息；

根据所述大数据信息及所述iSCSI设备名称信息，确定目标存储空间信息；

根据所述大数据信息及所述目标存储空间信息，对所述备份节点的存储空间进行读写，并根据所述大数据信息及所述目标存储空间信息更新主节点日志信息。

可选地，在所述的NAMENODE文件系统的管理方法中，还包括：

接收主节点存储配置信息；

根据所述主节点存储配置信息，得到主节点存储请求信息；

根据所述主节点存储请求信息，确定备份节点主存储资源信息；