[发明专利]分布式数据仓库中删除文件的方法、装置、设备及系统有效
申请号: | 201310628849.9 | 申请日: | 2013-11-29 |
公开(公告)号: | CN104679772B | 公开(公告)日: | 2019-01-25 |
发明(设计)人: | 庄虔玉;鲍春健;麦艺华;翟艳堂 | 申请(专利权)人: | 深圳市腾讯计算机系统有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/174 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 关文魁 |
地址: | 518000 广东省深圳市南*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种分布式数据仓库中删除文件的方法、装置、设备及系统,属于数据仓库管理领域。所述方法包括:向管理节点发送心跳上报;接收管理节点发送的携带有数据块标识的删除指令;将数据块标识存入至延迟队列中;在指定条件下删除延迟队列中存储的数据块标识所对应的数据块。本发明通过在接收管理节点发送的携带有数据块标识的删除指令,将数据块标识存入至延迟队列中,在指定条件下删除该延迟队列中存储的数据块标识所对应的数据块;解决了现有技术中NameNode中设置的回收站对某些情况下的误删除操作无法进行修复,降低了Hadoop系统的数据安全性的问题;达到了可以很大程度上保证了Hadoop系统中数据的安全性的效果。 | ||
搜索关键词: | 分布式 数据仓库 删除 文件 方法 装置 设备 系统 | ||
【主权项】:
1.一种分布式数据仓库中删除文件的方法,其特征在于,所述方法包括:向管理节点发送心跳上报,所述心跳上报包括数据节点存储的所有数据块的数据块标识,所述心跳上报用于使得所述管理节点根据所述心跳上报确定所述数据块标识到所述数据节点的映射;接收心跳返回,从接收到的所述心跳返回中获取所述管理节点发送的携带有数据块标识的删除指令;将所述数据块标识存入至延迟队列中并记录存入的时间,所述延迟队列用于保存需要删除的数据块的数据块标识;在指定条件下删除所述延迟队列中存储的所述数据块标识所对应的所述数据节点中的数据块。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市腾讯计算机系统有限公司,未经深圳市腾讯计算机系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310628849.9/,转载请声明来源钻瓜专利网。
- 上一篇:一种网络搜索方法和装置
- 下一篇:依据可视区域在网页中显示图片的系统及其方法