[发明专利]重复数据删除方法及装置有效
申请号: | 201410729944.2 | 申请日: | 2014-12-04 |
公开(公告)号: | CN104408154B | 公开(公告)日: | 2018-05-29 |
发明(设计)人: | 余健;钟延辉 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F3/06 |
代理公司: | 北京弘权知识产权代理事务所(普通合伙) 11363 | 代理人: | 郝雅娟;逯长明 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例公开了一种重复数据删除方法及装置。其中,重复数据删除方法,包括:将接收到的初始数据进行分块;获得每个数据分块的指纹;根据所有所述数据分块的指纹,生成所述初始数据的第一校验值;查找所述初始数据中的重复数据分块,删除所述重复数据分块;存储删除重复数据分块后的唯一块;根据所有所述唯一块的指纹,采用与所述第一校验值相同的生成方式,生成当前完成重复数据删除后数据的第二校验值;比较所述第一校验值和所述第二校验值,当所述第一校验值和所述第二校验值一致时,确定所述初始数据经过正确重复数据删除。通过本发明实施例,能够为重复数据删除过程中数据的准确性提供保证。 | ||
搜索关键词: | 校验 重复数据删除 初始数据 分块 重复数据 指纹 数据分块 删除 生成方式 存储 查找 保证 | ||
【主权项】:
1.一种重复数据删除方法,其特征在于,包括:将接收到的初始数据进行分块;获得每个数据分块的指纹;根据所有所述数据分块的指纹,生成所述初始数据的第一校验值;查找所述初始数据中的重复数据分块,删除所述重复数据分块;存储删除重复数据分块后的唯一块;根据所有所述唯一块的指纹,采用与所述第一校验值相同的生成方式,生成当前完成重复数据删除后数据的第二校验值;比较所述第一校验值和所述第二校验值,当所述第一校验值和所述第二校验值一致时,确定所述初始数据经过正确重复数据删除。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410729944.2/,转载请声明来源钻瓜专利网。