[发明专利]分布式文件系统中的数据处理方法和装置

说明书

本申请公开了一种分布式文件系统中的数据处理方法、装置，属于计算机技术领域。所述方法包括：在接收到第一数据的读请求的情况下，从缓存组的多个节点中确定第一节点；在所述第一节点不是本地节点的情况下，从所述第一节点读取所述第一数据；发送所述读请求的反馈信息，其中，所述反馈信息包括所述第一数据。

技术领域

本申请属于计算机技术领域，具体涉及一种分布式文件系统中的数据处理方法和装置。

背景技术

目前，在分布式文件系统中，计算节点在读取数据时，通常会直接通过网络从后端存储系统读取，且计算节点之间是独立不相关的。例如，当多个计算节点均要读取同一份目标文件时，这些计算节点会各自从后端存储系统读取该文件。

由此可见，在相关技术中，当计算节点数量较大、读取请求量较大时，后端存储系统的带宽会被打满，造成突发大流量的问题，计算节点的读取速度会受到影响，同时业务写入也因为无法及时发送给后端存储系统而受阻，增加后端存储系统的宕机风险，影响系统业务的数据处理速度。

发明内容

本申请实施例的目的是提供一种分布式文件系统中的数据处理方法和装置，能够缓解相关技术中分布式文件系统的后端存储系统的带宽压力，避免突发大流量的问题，从而有效降低后端存储系统的宕机风险，同时释放更多带宽用于处理有效数据请求，提高系统业务的数据处理速度。

第一方面，本申请实施例提供了一种分布式文件系统中的数据处理方法，包括：在接收到第一数据的读请求的情况下，从缓存组的多个节点中确定第一节点；在所述第一节点不是本地节点的情况下，从所述第一节点读取所述第一数据；发送所述读请求的反馈信息，其中，所述反馈信息包括所述第一数据。

第二方面，本申请实施例提供了一种分布式文件系统中的数据处理装置，包括：节点确定模块，用于在接收到第一数据的读请求的情况下，从缓存组的多个节点中确定第一节点；第一处理模块，用于在所述第一节点不是本地节点的情况下，从所述第一节点读取所述第一数据；返回模块，用于发送所述读请求的反馈信息，其中，所述反馈信息包括所述第一数据。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。

第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。

第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。

第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面所述的方法。

在本申请实施例中，通过在接收到第一数据的读请求的情况下，从缓存组的多个节点中确定第一节点；在所述第一节点不是本地节点的情况下，从所述第一节点读取所述第一数据；发送所述读请求的反馈信息，其中，所述反馈信息包括所述第一数据，能够缓解相关技术中分布式文件系统的后端存储系统的带宽压力，避免突发大流量的问题，从而有效降低后端存储系统的宕机风险，同时释放更多带宽用于处理有效数据请求，提高系统业务的数据处理速度。

附图说明

图1是本申请的一个实施例的缓存组的结构示意图；

图2是本申请的一个实施例的数据处理方法的示意性流程图之一；

图3是本申请的一个实施例的数据处理方法的示意性流程图之二；

图4是本申请的一个实施例的数据处理方法的示意性流程图之三；

图5是本申请的一个实施例的数据处理方法的示意性流程图之四；