[发明专利]分布式集群系统大文件删除方法、装置、设备及存储介质在审
| 申请号： | 201811528499.8 | 申请日： | 2018-12-13 |
| 公开（公告）号： | CN109299043A | 公开（公告）日： | 2019-02-01 |
| 发明（设计）人： | 魏盟 | 申请（专利权）人： | 浪潮电子信息产业股份有限公司 |
| 主分类号： | G06F16/16 | 分类号： | G06F16/16;G06F16/182 |
| 代理公司： | 北京集佳知识产权代理有限公司 11227 | 代理人： | 罗满 |
| 地址： | 250101 山东*** | 国省代码： | 山东;37 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 大文件 删除 删除请求 处理请求 删除单元 分布式集群系统 队列 计算机可读存储介质 分布式文件系统 客户端控制 存储介质 间接调节 删除操作 删除处理 异步发送 影响系统 预设文件 客户端 读写 放入 构建 时延 预设 内存 发送 占用 响应 申请 | ||
1.一种分布式集群系统大文件删除方法，其特征在于，基于客户端，包括：
当接收到大文件删除请求，按照预设文件拆分策略将所述大文件拆分为多个删除单元，并将各删除单元放入待处理请求队列中；
每次从所述待处理请求队列中选取预设个数的删除单元构建删除请求，并发送至后端进行删除处理，直至所述待处理请求队列为空。
2.根据权利要求1所述的分布式集群系统大文件删除方法，其特征在于，所述按照预设文件拆分策略将所述大文件拆分为多个删除单元包括：
以预设第一容量值为单位将所述大文件拆分为多个子文件；
将每个子文件拆分为多个容量值为第二容量值的删除单元。
3.根据权利要求2所述的分布式集群系统大文件删除方法，其特征在于，所述第二容量值为所述后端的存储单元容量值。
4.根据权利要求1至3任意一项所述的分布式集群系统大文件删除方法，其特征在于，所述接收到大文件删除请求之后，还包括：
在同步落盘的日志中记录所述大文件删除请求的删除操作信息；
其中，所述删除操作信息在接收到所述后端反馈的所有删除请求均完成后被删除。
5.根据权利要求4所述的分布式集群系统大文件删除方法，其特征在于，所述接收到大文件删除请求之后，还包括：
向前端返回删除成功的信息。
6.一种分布式集群系统大文件删除装置，其特征在于，基于客户端，包括：
文件拆分模块，用于当接收到大文件删除请求，按照预设文件拆分策略将所述大文件拆分为多个删除单元，并将各删除单元放入待处理请求队列中；
文件分批删除模块，用于每次从所述待处理请求队列中选取预设个数的删除单元构建删除请求发送至后端进行删除处理，直至所述待处理请求队列为空。
7.根据权利要求6所述的分布式集群系统大文件删除装置，其特征在于，所述文件拆分模块为以预设第一容量值为单位将所述大文件拆分为多个子文件；将每个子文件拆分为多个容量值为第二容量值的删除单元的模块。
8.根据权利要求7所述的分布式集群系统大文件删除装置，其特征在于，还包括日志记录删除操作模块，用于在同步落盘的日志中记录所述大文件删除请求的删除操作信息。
9.一种分布式集群系统大文件删除设备，其特征在于，包括处理器，所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1至5任一项所述分布式集群系统大文件删除方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有分布式集群系统大文件删除程序，所述分布式集群系统大文件删除程序被处理器执行时实现如权利要求1至5任一项所述分布式集群系统大文件删除方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于浪潮电子信息产业股份有限公司，未经浪潮电子信息产业股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201811528499.8/1.html，转载请声明来源钻瓜专利网。
- 上一篇：一种日志处理方法及系统
- 下一篇：一种基于公司内部日志的安全可视化分析系统
