[发明专利]一种数据处理方法、主节点及存储介质

说明书

本申请提供了一种数据处理方法，包括：集群中的主节点接收并写入客户端发送的待写入数据；所述主节点将所述待写入数据发送至所述集群中的至少一个从节点；若所述主节点接收到全部所述从节点中的第一从节点发送的第一确认信息，则确认所述待写入数据成功写入至所述集群中；所述第一确认信息用于指示所述第一从节点成功写入所述待写入数据；本申请还提供一种主节点及存储介质，通过本申请提供的数据处理方法、主节点及存储介质，在写入数据时，能够减少数据写入的次数，进而减少由于多次写入操作导致的延迟。

技术领域

本申请涉及分布式存储技术领域，尤其涉及一种数据处理方法、主节点及存储介质。

背景技术

在常规的基于日志的数据模型中，数据写入磁盘的过程需要两个步骤，首先是将数据和操作信息作为一条日志写入日志分区，然后集群复制组内的主节点将此日志发送给集群复制组的其他从节点。其他从节点同样会将这条日志写入日志分区中，并向主节点发送响应信息。待复制组内过半成员确认可以执行此写入操作后，主节点向其他从节点发送写入指令，其他从节点将数据从日志分区移到数据分区。

上述模型的好处是可以在保证数据强一致性的同时，在系统出现故障时，可以基于日志对数据进行增量恢复；然而，针对一条日志基于上述模型写入数据的情景，会存在写入操作次数多的问题，增加了写入数据延迟。

发明内容

本申请提供一种数据处理方法、主节点及存储介质，以至少解决现有技术中存在的以上技术问题。

本申请第一方面提供一种数据处理方法，包括：

所述主节点将所述待写入数据发送至所述集群中的至少一个从节点；

若所述主节点接收到全部所述从节点中的第一从节点发送的第一确认信息，则确认所述待写入数据成功写入至所述集群中；所述第一确认信息用于指示所述第一从节点成功写入所述待写入数据。

上述方案中，所述主节点和/或所述第一从节点写入所述待写入数据对应的版本标识。

上述方案中，所述主节点接收到全部所述从节点中的第一从节点发送的第一确认信息之后，所述方法还包括：

所述主节点确认所述待写入数据对应的数据块在所述第一从节点有效；

和/或，所述主节点确认所述待写入数据对应的数据块在第二从节点失效，所述第二从节点为全部所述从节点中除所述第一从节点以外的从节点。

上述方案中，所述方法还包括：

所述主节点获取各所述从节点对应的数据块；

所述主节点根据各所述从节点对应的数据块的属性信息，确定每个所述数据块的有效性，得到确认结果。

上述方案中，若所述确认结果表征至少一个所述数据块失效，则所述方法还包括：

所述主节点确认数据块在所述集群包括的全部节点中分别对应的版本标识；

确定更新时间最近的版本标识对应的数据块所对应的第一节点；

若所述第一节点为所述主节点，则所述主节点确定第三从节点，所述第三从节点对应的数据块的版本标识不是更新时间最近的版本标识；

将所述更新时间最近的版本标识对应的数据发送至所述第三从节点。

上述方案中，若所述确认结果表征至少一个所述数据块失效，则所述方法还包括：

所述主节点确认数据块在所述集群包括的全部节点中分别对应的版本标识；

确定更新时间最近的版本标识对应的数据块所对应的第一节点；

若所述第一节点不是所述主节点，则所述主节点写入所述更新时间最近的版本标识对应的数据块；