[发明专利]分布式存储系统数据修改写方法及系统

说明书

本发明公开了一种分布式存储系统数据修改写方法及系统，方法包括：主存储模块在接收到客户端发送的修改数据后，通过预制定的纠删算法对修改数据运算；主存储模块将运算得到的数据存储，并向各从存储模块发送运算得到的数据，发送的数据包含对象编码、集合编码、偏移量、数据长度和修改数据本身；从存储模块在接收到数据后，创建长度与数据长度相同的临时对象，并将临时对象初始化为全零；从存储模块在对象编码指定的对象中，将从偏移量开始、长度为数据长度的数据复制到临时对象中，并将修改数据写入对象中。与现有方法相比，本发明方法及系统可节省存储空间，节省存储开销；并且不进行临时对象数据的备份，减少了不必要的读写操作，可提高写带宽。

技术领域

本发明涉及存储技术领域，特别是涉及一种分布式存储系统数据修改写方法及系统。

背景技术

请参考图1(a)至图1(e)所示，现有技术中，分布式存储系统进行数据修改写采用的处理逻辑是，首先创建临时对象，临时对象与原对象大小一样；然后在临时对象中，将从需要修改的老数据对应的偏移量开始到对应长度的那段数据，先备份再用ZERO进行覆盖；最后将原对象中修改数据写入到临时对象中ZERO区段，将新数据写入原对象。存储系统中的修改写操作是指只修改对象中的一部分内容。

然而，现有这种修改写方法，需要申请与原对象空间大小一样的临时对象，其实用到的空间大小只是偏移量开始到对应长度，浪费了一部分空间；对临时对象中被写入数据的那部分进行备份，是没有必要的，因为即使修改写失败也不必恢复临时对象中原有的内容，这样增加了不必要的读写操作，降低了写带宽。

发明内容

本发明的目的是提供一种分布式存储系统数据修改写方法及系统，与现有技术相比，减少了不必要的读写操作，可提高写带宽，并节省了不必要的存储开销。

为实现上述目的，本发明提供如下技术方案：

一种分布式存储系统数据修改写方法，包括：

主存储模块在接收到客户端发送的修改数据后，通过预制定的纠删算法对修改数据运算；

所述主存储模块将运算得到的数据存储，并向各从存储模块发送运算得到的数据，发送的数据包含对象编码、集合编码、偏移量、数据长度和修改数据本身；

所述从存储模块在接收到数据后，创建长度与数据长度相同的临时对象，并将所述临时对象初始化为全零；

所述从存储模块在所述对象编码指定的对象中，将从所述偏移量开始、长度为所述数据长度的数据复制到所述临时对象中，并将所述修改数据写入所述对象中。

可选地，在所述从存储模块将所述修改数据写入所述对象中之后，还包括：

所述从存储模块向所述主存储模块发送应答信息，以告知所述主存储模块接收到的修改数据已经落盘，同时记录本对象新的版本号。

可选地，还包括：

当所述主存储模块接收到所有从存储模块发送的应答信息后，向所述客户端发送用于告知数据已经写完的应答信息，并向各所述从存储模块发送删除操作指令，所述删除操作指令用于指示所述从存储模块删除所述临时对象。

可选地，若所述分布式存储系统出现宕机并在重启后，所述主存储模块检查各所述从存储模块的对象版本号，取其中最低的版本号作为基准版本号；

若所述从存储模块的对象版本号高于所述基准版本号，则将所述临时对象的内容复制到所述从存储模块原对象中所述偏移量和所述数据长度指定的区域，复制完成后删除所述临时对象，并将所述对象版本号降级为所述基准版本号；

若所述从存储模块的对象版本号为所述基准版本号，并且临时对象的内容不是全零，则将所述临时对象的内容复制到所述从存储模块原对象中所述偏移量和所述数据长度指定的区域，复制完成后删除所述临时对象；