[发明专利]分布式存储内容处理方法及系统

说明书

本发明实施例提供的分布式存储内容处理方法及系统，首先根据在分布式存储环境中的各分布式存储业务产生的包括存储节点位置信息的分布式存储内容分段，获取分布式存储内容序列，然后根据分布式存储内容序列，确定分布式存储内容序列对应的内容存储编码方式组合，内容存储编码方式组合包括所述存储节点位置信息关于各个分布式存储内容分段的存储编码方式，接着根据内容存储编码方式组合，生成与分布式存储内容序列中的不同存储节点位置信息对应的内容存储预编码指示，最后根据所述内容存储预编码指示以及所述存储节点位置信息对各所述分布式存储内容分段分别在对应的存储节点位置处进行编码存储，可实现对分布式存储内容分段进行高效的分段存储。

技术领域

本发明涉及数据存储技术领域，具体而言，涉及一种分布式存储内容处理方法及系统。

背景技术

随着分布式存储技术的快速发展，基于分布式存储环境会产生大量的带存储内容分段，如何高效的实现对这些内容的分段存储是一个较重要的问题。

发明内容

基于上述内容，本发明实施例提供一种分布式存储内容处理方法，包括：

根据在分布式存储环境中的各分布式存储业务产生的包括存储节点位置信息的分布式存储内容分段，获取分布式存储内容序列；

根据所述分布式存储内容序列，确定所述分布式存储内容序列对应的内容存储编码方式组合，所述内容存储编码方式组合包括所述存储节点位置信息关于各个分布式存储内容分段的存储编码方式；

根据所述内容存储编码方式组合，生成与所述分布式存储内容序列中的不同存储节点位置信息对应的内容存储预编码指示； 根据所述内容存储预编码指示以及所述存储节点位置信息对各所述分布式存储内容分段分别在对应的存储节点位置处进行编码存储。

其中，所述根据所述分布式存储内容序列，确定所述分布式存储内容序列对应的内容存储编码方式组合，包括：

将所述分布式存储内容序列通过预先建立的编码方式规则映射表进行内容匹配，通过所述编码方式规则映射表对所述分布式存储内容序列进行映射匹配，得到所述内容存储编码方式组合。

其中，根据所述内容存储编码方式组合，生成与所述分布式存储内容序列中的不同存储节点位置信息对应的内容存储预编码指示，包括：

根据所述内容存储编码方式组合，得到所述内容存储编码方式组合中包括的各存储节点各自关联的内容存储路径；

根据所述内容存储路径，生成与各存储节点的所述内容存储路径对应的内容存储预编码指示。

其中，所述根据所述内容存储预编码指示以及所述存储节点位置信息对各所述分布式存储内容分段分别在对应的存储节点位置处进行编码存储，包括：

将各所述分布式存储内容分段通过通过先入先出的方式一次存入预设的内容堆栈中；

依据所述内容存储与编码指示依据所述内容堆栈的内容指针从栈尾依次获取所述内容堆栈中的分布式存储内容分段，并按照对应的存储编码方式将获取的分布式存储内容分段进行预编码后存储到对应的存储节点；

本发明还提供一种分布式存储内容处理系统，包括：

获取模块，用于根据在分布式存储环境中的各分布式存储业务产生的包括存储节点位置信息的分布式存储内容分段，获取分布式存储内容序列；

确定模块，用于根据所述分布式存储内容序列，确定所述分布式存储内容序列对应的内容存储编码方式组合，所述内容存储编码方式组合包括所述存储节点位置信息关于各个分布式存储内容分段的存储编码方式；

编码存储模块，用于根据所述内容存储编码方式组合，生成与所述分布式存储内容序列中的不同存储节点位置信息对应的内容存储预编码指示， 根据所述内容存储预编码指示以及所述存储节点位置信息对各所述分布式存储内容分段分别在对应的存储节点位置处进行编码存储。

其中，所述确定模块，具体用于：