[发明专利]一种加密数据去重方法、系统及相关装置

说明书

本申请所提供的一种加密数据去重方法，包括：基于第一标签生成函数计算目标文件对应的第一标签，并将第一标签上传至云服务器进行文件级重复性检测，得到文件级重复性检测结果；若文件级重复性检测结果为云服务器上存在第一标签，则执行文件级数据去重操作；若文件级重复性检测结果为云服务器上不存在第一标签，则执行块级数据去重操作。该方法根据文件级重复性检测结果的不同，分别执行对应的文件级数据去重操作和块级数据去重操作，也即该方法结合了文件级数据去重和块级数据去重，对文件和数据块均可以进行去重，故能够提高云服务器上加密数据的去重效率。本申请还提供一种加密数据去重系统、设备及计算机可读存储介质，均具有上述有益效果。

技术领域

本申请涉及加密数据去重领域，特别涉及一种加密数据去重方法、系统、设备及计算机可读存储介质。

背景技术

用户将数据上传到云服务器上保存以节省本地存储空间，后期可随时获取存放在云服务器上的数据，云服务器用于存储用户的加密数据。数据去重使得数据副本在云服务器中只存储一份，云服务器为该数据的所有合法用户创建访问链接，使其可获取数据。数据去重在实际应用中可节省大量的网络带宽和存储空间。

目前，相关技术中的加密数据去重方法是：用户上传数据到云服务器，首先借助可信第三方进行流行度查询，反馈查询结果。对于非流行数据，云服务器保存，对于流行数据，云服务进行文件级数据去重。但是，文件级数据去重只能对文件进行去重，去重效率较低。

因此，如何提高云服务器上加密数据的去重效率是本领域技术人员亟需解决的技术问题。

发明内容

本申请的目的是提供一种加密数据去重方法、系统、设备及计算机可读存储介质，能够提高云服务器上加密数据的去重效率。

为解决上述技术问题，本申请提供一种加密数据去重方法，应用于客户端，包括：

基于第一标签生成函数计算目标文件对应的第一标签，并将所述第一标签上传至云服务器进行文件级重复性检测，得到文件级重复性检测结果；

若所述文件级重复性检测结果为所述云服务器上存在所述第一标签，则执行文件级数据去重操作；

若所述文件级重复性检测结果为所述云服务器上不存在所述第一标签，则执行块级数据去重操作。

优选地，所述若所述文件级重复性检测结果为所述云服务器上存在所述第一标签，则执行文件级数据去重操作，包括：

若所述文件级重复性检测结果为所述云服务器上存在所述第一标签，则执行文件级别的所有权证明协议以验证所有权；

若所述所有权验证通过，则接收并存储所述云服务器发送的所述第一标签对应的数据指针；

基于第二标签生成函数计算所述目标文件对应的第二标签，并将所述第二标签上传至密钥管理服务器以确定所述目标文件的合法用户数量；

将所述合法用户数量与预设流行度阈值进行比较，确定所述目标文件的数据类型；

根据所述数据类型执行对应的文件级数据去重操作。

优选地，所述接收并存储所述云服务器发送的所述第一标签对应的数据指针之后，还包括：

根据所述数据指针，从所述云服务器下载所述目标文件对应的文件密文；

获取所述文件密文的文件加密密钥，并利用所述文件加密密钥对所述文件密文进行解密，得到所述目标文件。

优选地，所述若所述文件级重复性检测结果为所述云服务器上不存在所述第一标签，则执行块级数据去重操作，包括：

若所述文件级重复性检测结果为所述云服务器上不存在所述第一标签，将所述目标文件划分为预设数量的数据块，并基于所述第一标签生成函数计算各个所述数据块对应的第三标签；