[发明专利]面向海量小文件的并发处理方法、装置和存储介质有效
申请号: | 201710370949.4 | 申请日: | 2017-05-23 |
公开(公告)号: | CN108959313B | 公开(公告)日: | 2021-03-05 |
发明(设计)人: | 高丽 | 申请(专利权)人: | 中国移动通信集团重庆有限公司;中国移动通信集团公司 |
主分类号: | G06F16/11 | 分类号: | G06F16/11;G06F16/17;G06F9/54 |
代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 贺琳 |
地址: | 401121*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种面向海量小文件的并发处理方法、装置和存储介质。该方法包括:接收多个节点对海量小文件的并发处理请求;基于并发处理请求,调用存储海量小文件的元数据块;为多个节点分别建立临时虚拟数据空间,并在临时虚拟数据空间中虚拟化元数据块得到第一虚拟数据块;接收多个节点在虚拟数据空间中对第一虚拟数据块进行虚拟处理生成的第二虚拟数据块,并整合第二虚拟数据块。由此,本发明实施例可以将单个元数据块虚拟化成多个临时虚拟数据块,使得原有的单一节点处理的小文件,可以在多节点上的临时虚拟数据空间并发处理,不仅可以降低硬件开销,而且可以大幅度提高对海量小文件处理效率。 | ||
搜索关键词: | 面向 海量 文件 并发 处理 方法 装置 存储 介质 | ||
【主权项】:
1.一种面向海量小文件的并发处理方法,其特征在于,包括以下步骤:接收多个节点对海量小文件的并发处理请求;基于所述并发处理请求,调用存储所述海量小文件的元数据块;为所述多个节点分别建立临时虚拟数据空间,并在所述临时虚拟数据空间中虚拟化所述元数据块得到第一虚拟数据块;接收所述多个节点在所述虚拟数据空间中对所述第一虚拟数据块进行虚拟处理生成的第二虚拟数据块,并整合所述第二虚拟数据块。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团重庆有限公司;中国移动通信集团公司,未经中国移动通信集团重庆有限公司;中国移动通信集团公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710370949.4/,转载请声明来源钻瓜专利网。
- 上一篇:一种多文档摘要生成的方法、装置和终端
- 下一篇:一种语义检索方法和装置