[发明专利]缓存的管理方法、缓存节点及分布式存储系统

说明书

本发明提供了缓存的管理方法、缓存节点及分布式存储系统，该方法包括：预先保存至少一个缓存节点的RDMA连接信息，确定待缓存数据的存储信息；确定用于缓存所述待缓存数据的缓存节点；确定用于向缓存节点缓存所述待缓存数据的存储节点；将所述待缓存数据的存储信息和确定出的缓存节点的RDMA连接信息发送给确定出的存储节点，以使所述确定出的存储节点根据所述待缓存数据的存储信息读取所述待缓存数据，根据所述确定出的缓存节点的RDMA连接信息将读取的所述待缓存数据通过RDMA连接缓存到所述确定出的缓存节点的内存中。本发明提供了缓存的管理方法、缓存节点及分布式存储系统，能够提高对分布式存储系统中缓存的处理速度。

技术领域

本发明涉及分布式存储技术领域，特别涉及缓存的管理方法、缓存节点及分布式存储系统。

背景技术

随着大数据和信息产业的发展，需要保存和处理的数据量越来越大。分布式存储系统已成为数据中心的重要部分。I/O性能对上层应用的性能影响很大，目前大数据平台已出现了很多新的应用程序，如社交图分析、科学数据处理和机器学习等。缓存可以加速重复使用的文件或数据的读写性能。

现有的分布式存储系统缓存机制中，在向缓存节点中缓存数据时，需要缓存节点的操作系统介入，在从缓存节点读取缓存的数据时，也需要缓存节点的操作系统介入。

通过上述描述可见，在现有技术中由于需要缓存节点的操作系统介入，使得对分布式存储系统中缓存的处理速度较慢。

发明内容

本发明实施例提供了缓存的管理方法、缓存节点及分布式存储系统，能够提高对分布式存储系统中缓存的处理速度。

第一方面，本发明实施例提供了分布式存储系统中缓存的管理方法，应用于分布式存储系统的元数据节点，预先保存至少一个缓存节点的RDMA(Remote Direct MemoryAccess，远程直接数据存取)连接信息，该方法还包括：

确定待缓存数据的存储信息；

确定用于缓存所述待缓存数据的缓存节点；

确定用于向缓存节点缓存所述待缓存数据的存储节点；

将所述待缓存数据的存储信息和确定出的缓存节点的RDMA连接信息发送给确定出的存储节点，以使所述确定出的存储节点根据所述待缓存数据的存储信息读取所述待缓存数据，根据所述确定出的缓存节点的RDMA连接信息将读取的所述待缓存数据通过RDMA连接缓存到所述确定出的缓存节点的内存中。

可选地，

在所述确定待缓存数据的存储信息之前，进一步包括：

接收写入端发来的写入所述待缓存数据的写入请求；

根据所述写入请求，为所述待缓存数据分配至少一个缓存节点和至少一个存储节点，将该至少一个缓存节点的RDMA连接信息和该至少一个存储节点的节点信息发送给所述写入端，以使所述写入端根据该至少一个缓存节点的RDMA连接信息将所述待缓存数据通过RDMA连接缓存到该至少一个缓存节点的内存中，根据该至少一个存储节点的节点信息触发该至少一个存储节点从该至少一个缓存节点的内存读取所述待缓存数据并保存。

可选地，

该方法进一步包括：

初始化缓存节点中的缓存块的状态为第一状态，其中，所述缓存块为缓存节点中用于缓存数据的数据块，当缓存块为第一状态时，表示该缓存块没有缓存数据或该缓存块中缓存的数据已失效；

在所述确定用于缓存所述待缓存数据的缓存节点之后，进一步包括：

为所述确定出的缓存节点中的一个缓存块分配一个缓存任务，其中，所述缓存任务为缓存所述待缓存数据的任务；