[发明专利]云存储数据存储方法、装置、系统、设备及存储介质

说明书

本发明实施例提供一种云存储数据存储方法、装置、系统、设备及存储介质，具体实现方案为：该方法包括：获取终端的待存储文件，并根据待存储文件生成对应的标识信息；根据标识信息查找预设的标识文件数据库和/或云资源池中是否存在相同的标识信息；其中，云资源池中存储的所有数据都设有相应的唯一标识信息；若标识文件数据库或云资源池中存在相同的标识信息，则删除所述待存储文件；若标识文件数据库和所述云资源池中都不存在相同的标识信息，则将所述待存储文件对应的标识信息存入所述标识文件数据库中，并将所述待存储文件存入对应的云资源池。本发明实施例的方法可以降低存储重复数据的概率，降低存储资源的浪费。

技术领域

本发明实施例涉及云存储技术领域，尤其涉及一种云存储数据存储方法、装置、系统、设备及存储介质。

背景技术

随着数据量的飞速增长，存储空间和传输速率成为当前网络存储领域的一大难题。对于存储空间，大部分的研究都放在了如何扩大存储空间上，而对于存储空间中数据清理的研究则是较少的。据数据统计，在所有备份的数据中，高达80％以上的数据是冗余的，大量的冗余数据占据着大量的存储空间，造成了大量浪费存储资源的现象。

目前对于云存储空间来说，存储新的待存储数据普遍是直接存储的方式，即使云存储空间中已经存在与该新的待存储数据相同的数据，也并不影响新的待存储数据的存储。

因此，目前的云存储空间在存储新的数据时不会进行对应的筛选，导致存储资源浪费较大。

发明内容

本发明提供一种云存储数据存储方法、装置、系统、设备及存储介质，用以解决目前的云存储空间在存储新的数据时不会进行对应的筛选，导致存储资源浪费较大的问题。

本发明实施例第一方面提供一种云存储数据存储方法，包括：

获取终端的待存储文件，并根据所述待存储文件生成对应的标识信息；

根据所述标识信息查找预设的标识文件数据库和/或云资源池中是否存在相同的标识信息；其中，所述云资源池中存储的所有数据都设有相应的唯一标识信息；

若所述标识文件数据库或所述云资源池中存在相同的标识信息，则删除所述待存储文件；

若所述标识文件数据库和所述云资源池中都不存在相同的标识信息，则将所述待存储文件对应的标识信息存入所述标识文件数据库中，并将所述待存储文件存入对应的云资源池。

进一步地，如上所述的方法，所述标识信息包括文件名信息；

所述根据所述标识信息查找预设的标识文件数据库和/或云资源池中是否存在相同的标识信息包括：

根据由所述待存储文件生成的文件名信息查找所述云资源池和/或所述标识文件数据库中是否存在相同的文件名信息。

进一步地，如上所述的方法，所述标识信息还包括MD5串；

若所述云资源池或所述标识文件数据库中存在与所述待存储文件相同的文件名信息，则所述方法还包括：

根据所述待存储文件调用源数据库的应用程序接口，以得到对应的返回块数据；

根据返回块数据的数据大小将所述待存储文件切割成多个所述数据大小的存储文件数据块；

通过MD5的计算方式计算各个存储文件数据块以得到所述待存储文件对应的MD5串；

根据所述待存储文件对应的MD5串查找所述云资源池和/或所述标识文件数据库中是否存在相同的MD5串。

进一步地，如上所述的方法，所述若所述标识文件数据库或所述云资源池中存在相同的标识信息，则删除所述待存储文件，包括：