[发明专利]数据的管理方法、装置以及电子设备

说明书

本申请提供了一种数据的管理方法、装置以及电子设备，涉及数据管理技术领域，可以解决数据储存的合理度较低的技术问题。具体方案为：数据的管理方法应用于第一储存节点，所述第一储存节点中储存有第一哈希值集合，所述第一哈希值集合中的每个哈希值与本地储存的数据块一一对应，所述方法包括：接收第二储存节点传输的待处理数据块；所述待处理数据块对应有待处理哈希值；对所述第一哈希值集合中的所有哈希值进行遍历；若所述所有哈希值中，不存在与所述待处理哈希值相同的哈希值，则将所述待处理数据块储存至本地。

技术领域

本申请涉及数据管理技术领域，尤其是涉及一种数据的管理方法、装置以及电子设备。

背景技术

数据管理是利用计算机硬件和软件技术对数据进行有效的收集、储存、处理和应用的过程，目的在于充分有效的发挥数据的作用。

其中，数据的储存是将经过加工整理序化后的数据按照一定的格式和顺序，储存在特定的载体中。例如，数据以某种格式记录在计算机内部或外部储存介质上。其目的是为了便于数据管理者能够快速准确的识别、定位和检索到数据。

数据储存的对象包括数据流在加工过程中产生的临时文件、加工过程中需要查找的信息等等多种数据。因此，一般的储存节点中会储存有大量数据，这些大量数据需要占用的储存空间也会较大，使储存资源的浪费情况较为严重。对于现有技术而言，急需一种较为合理的数据管理方法，以对数据进行合理的储存。

发明内容

本申请的目的在于提供一种数据的管理方法、装置以及电子设备，以解决数据储存的合理度较低的技术问题。

本发明提供的一种数据的管理方法，应用于第一储存节点，所述第一储存节点中储存有第一哈希值集合，所述第一哈希值集合中的每个哈希值与本地储存的数据块一一对应，所述方法包括：

接收第二储存节点传输的待处理数据块；所述待处理数据块对应有待处理哈希值；

对所述第一哈希值集合中的所有哈希值进行遍历；

若所述所有哈希值中，不存在与所述待处理哈希值相同的哈希值，则将所述待处理数据块储存至本地。

进一步的，所述待处理数据块的数量为多个；

多个所述待处理数据块中的每个待处理数据块对应有待处理哈希值；

所述将所述待处理数据块储存至本地，包括：

将所述所有哈希值中不存在的待处理哈希值所对应的待处理数据块，储存至本地。

进一步的，若干个所述本地储存的数据块是由所述第一储存节点中的数据控制器，对第一文件中的数据进行拆分而生成；所述第一文件储存于所述第一储存节点中。

进一步的，所述第一储存节点中设置有第一数据列表，所述第一数据列表用于记录所述第一哈希值集合；

所述对所述第一哈希值集合中的所有哈希值进行遍历，包括：

对所述第一数据列表进行遍历，判断所述第一数据列表中是否存在与所述待处理哈希值相同的哈希值。

进一步的，所述对所述第一哈希值集合中的所有哈希值进行遍历之后，还包括：

若所述所有哈希值中，不存在与所述待处理哈希值相同的哈希值，则将所述待处理哈希值记录于所述第一数据列表中。

进一步的，所述将所述待处理哈希值记录于所述第一数据列表中之后，还包括：

将记录所述待处理哈希值后的第一数据列表传输至所有储存节点，以使所述所有储存节点对第二数据列表进行更新；所述第二数据列表用于记录每个储存节点的数据储存情况；所述数据储存情况用于为数据的获取过程提供获取地址。