[发明专利]一种Hadoop文件系统并发高速数据完全删除的方法

摘要

本发明公开了一种Hadoop文件系统并发高速数据完全删除的方法，实现对Hadoop文件系统数据的完全删除，快捷且有效地彻底清除数据，保障用户的数据安全，有效防止数据泄露，避免了因数据泄露而导致的危害和经济损失。

主权项

1.一种Hadoop文件系统并发高速数据完全删除的方法，其特征在与，包括用户客户端、Hadoop的名称节点和数据节点，所述Hadoop名称节点响应用户客户端的服务请求，并在处理后转发给数据节点中的服务程序。a客户端选择需要完全删除的文件名以及删除等级，发送的服务请求给所述Hadoop的名称节点；b所述Hadoop的名称节点接受到用户客户端发送的服务请求后，锁定任务列表，独占式访问，如果查询任务列表，用户客户端发送的删除服务请求不在任务列表，则将该任务添加到任务列表，然后释放任务列表锁，如果查询用户客户端发送的删除服务请求已经在任务列表，则反馈给用户客户端该任务已在任务列表，然后释放任务列表锁；c所述Hadoop的名称节点中的服务程序把数文件名和数据块名包装为数据流发送给所有存放有待删除数据块的数据节点；d所述数据节点中的服务程序响应所述Hadoop的名称节点服务请求，根据服务请求获得待删除数据块名称和删除等级；e所述数据节点上获得数据块名称和删除等级后，锁定任务列表，独占式访问，如果查询任务列表，待删除数据块不在任务列表，则将该数据块添加到任务列表，然后释放任务列表锁；如果查询待删除数据块已经在任务列表，则反馈给名称节点中服务程序该任务已在任务列表，然后释放任务列表锁；f所述数据节点中的服务程序遍历任务列表，对数据块执行覆写操作，所述数据节点实时发送已删除数据块数量给所述Hadoop的名称节点；g所述Hadoop的名称节点中的服务程序在对完全删除操作结束后，调用Hadoop的API对该文件进行删除，进而使得该文件从Hadoop的文件目录中删除；h所述Hadoop的名称节点中的服务程序汇总所有有删除任务的数据节点中的服务程序发送的删除进度，进而计算出文件总体删除进度，并实时发送给用户客户端。