[发明专利]热点数据的网络存储和访问方法、设备及系统

说明书

技术领域

本发明涉及一种信息处理方法，尤其涉及一种热点数据的网络存储和访问方法、设备及系统。

背景技术

随着时代的发展，网络存储发展迅速，分布式储存运用广泛，网络规模不断扩大，访问节点越来越多。对象存储融合了存储域网络(SAN，Storage AreaNetwork)的可扩展性和网络附属存储(NAS，Network Attached Storage)的数据共享，是当今网络存储的发展方向。T10的对象存储设备(OSD，Object-Based Storage Device)协议定义了基于对象的存储设备的通讯协议。对象(Object)是数据管理的基本单元。虽然网络存储的容量巨大，但是只有小部分的内容被频繁访问。现有的分布式网络中这些频繁被多个客户端并发访问的数据(热点数据)仅仅存在于特定的一个或几个OSD存储节点中，成千上万的客户端并发访问特定几个存储节点，势必会造成网络负载不均衡，访问时延增大和存储节点利用率低等问题。此外，在OSD存储节点中使用标识号来标示每个对象。现有OSD协议管理对象标识号十分简单，每个OSD存储节点维护一个最后使用标识(last_标识)，创建对象就对last_标识加一。删除某个对象后其对象标识不再使用，多个OSD存储节点上的对象标识没有相关性，没有充分利用标识资源。

发明内容

本发明实施例的目的在于提供一种热点数据的网络存储和访问方法、设备及系统，能够解决热点数据访问导致的网络繁忙和存储介电利用率低的问题。

本发明实施例提供一种热点数据的网络存储方法，该方法包括：在存储节点中设置热点数据区，并；将相同的热点数据存入所述热点数据区；以及记录文件布局信息。

本发明实施例还提供一种热点数据的访问方法，该方法包括：获得文件布局信息；以及当确定要访问的数据为热点数据时，选择空闲的存储节点访问该热点数据。

本发明实施例还提供一种数据管理设备，该设备包括：标识管理模块，用于设定存储节点上热点数据区的对象标识号范围，和向数据分配和回收热点数据区的对象标识号；以及文件布局信息模块，用于记录、提供和修改文件布局信息。

本发明实施例还提供一种存储节点访问设备，该设备包括：接收模块，用于接收文件布局信息；热点确定模块，用于根据所述文件布局信息确定文件为热点数据；以及访问模块，用于访问空闲存储节点上的热点数据。

本发明实施例还提供一种网络存储访问系统，该系统包括：至少两个网络存储节点设备，每个存储节点设置热点数据区，所述热点数据区中存储有相同的热点数据；元数据服务器，用于提供文件布局信息；以及存储节点访问设备，用于接收文件布局信息，根据所述文件布局信息确定文件为热点数据，访问空闲存储节点上的热点数据。

本发明的实施例，在访问热点数据的时候充分利用网络资源，负载平衡，减少网络延迟，提高系统吞吐量；统一管理热点数据区的对象标识，统一管理分配回收对象标识，充分利用了对象标识资源。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，并不构成对本发明的限定。在附图中：

图1A是本发明实施例一的存储方法流程图；

图1B是本发明实施例一中将热点数据存入热点数据区的流程图；

图1C是本发明实施例一中热点数据转变为普通数据的处理流程图；

图2A是本发明实施例二的访问方法流程图。

图2B是本发明实施例二选择空闲存储节点访问步骤方式一的流程图。

图2C是本发明实施例二选择空闲存储节点访问步骤方式二的流程图。

图3是本发明实施例的设置网络存储节点设备对象标识号的示意图。

图4是本发明实施例三的数据管理设备结构示意图。

图5是本发明实施例四的存储节点访问设备结构示意图。

图6是本发明实施例五的网络存储系统结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合实施例和附图，对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。

实施例一

本发明实施例提供一种热点数据的网络存储方法。下面参照图1A到图1C，详细说明该热点数据的网络存储方法，该方法由元数据处理器执行。该方法包括：

步骤S110：在存储节点中设置热点数据区，设定热点数据区的对象标识号范围；