[发明专利]基于高带宽存储系统的数据同步方法

摘要

本发明提供了一种基于高带宽存储系统的数据同步方法，该方法包括：将簇封装成定长数据段，执行纠删码算法生成多个编码对象，分散到不同节点上存储；当收到文件读取请求后，解析文件标识符查询相应文件的簇列表，然后查询出其所属的对象的标识符和编码对象组的标识符，一并存储到专门的结构；根据该结构中信息读取各簇的数据；查找到对象所存放的位置，然后通过簇标识符在该对象的簇索引内进行查找，找到该簇在对象内的偏移地址和长度，最后读取区间的数据；按照所述结构中指定的顺序拼装成原始文件。本发明提出了一种基于高带宽存储系统的数据同步方法，实现了高性能、低功耗的SSD与高带宽容灾分布式存储架构的有机结合。

主权项

1.一种基于高带宽存储系统的数据同步方法，用于在基于SSD的分布式存储系统中进行数据存储，其特征在于，包括：/nSSD节点在接收到文件划分成的簇时，将其封装成定长数据段，/n随后将多个定长数据段分成一组，执行纠删码算法生成多个编码对象；/n将编码对象组内的各个对象分散到不同节点上存储；/n对于同一个或同一批文件所属的新簇，将其封装并分组编码生成的编码对象组调度到同一组节点存储；/n当接收到文件读取请求后，解析请求中附带的文件标识符；/n根据文件标识符查询相应文件的簇列表，包括查询该文件包含的所有簇的标识符，然后根据各簇的标识符查询出其所属的对象的标识符，根据对象的标识符查询出对象所属的编码对象组的标识符，再通过对象组的标识符查询出该对象所在的SSD节点的标识符；/n全部查询完成后，将文件所包含的所有簇的标识符列表、各簇所属对象的标识符以及该对象所在SSD节点的标识符信息都一并存储到专门的结构；/n根据该结构中包含的簇标识符列表和各簇的存放位置信息，从相应的SSD节点读取各簇的数据；/nSSD节点通过对象标识符查找到对象所存放的位置，然后通过簇标识符在该对象的簇索引内进行查找，找到该簇在对象内的偏移地址和长度，最后读取相应区间的数据；/n按照所述结构中指定的顺序拼装到一起，最终组合成原始文件。/n