[发明专利]一种基于快速存储设备的海量小文件解决方法在审
申请号: | 201711380587.3 | 申请日: | 2017-12-20 |
公开(公告)号: | CN108287869A | 公开(公告)日: | 2018-07-17 |
发明(设计)人: | 曹靖城;陆涛;高丽华;吕超;王霄雨 | 申请(专利权)人: | 江苏省公用信息有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 南京天华专利代理有限责任公司 32218 | 代理人: | 许轲;夏平 |
地址: | 210037 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于快速存储设备的海量小文件解决方法,其包括步骤为:(1)采集小文件,对大小在1KB‑1MB小文件进行采集;(2)将小文件拆分为元数据和数据信息;(3)小文件元数据写入数据库,数据信息写入快速存储设备;(4)基于快速存储设备进行数据归并。本发明不仅能够解决海量小文件元数据庞大,查找性能低下的问题,同时能够以较低的成本提升小文件读写性能问题,易于推广。 | ||
搜索关键词: | 小文件 快速存储设备 海量小文件 元数据 数据信息 写入 采集 查找性能 读写性能 归并 数据库 | ||
【主权项】:
1.一种基于快速存储设备的海量小文件解决方法,其特征在于包括如下步骤:步骤一:采集小文件,对大小在1KB‑1MB小文件进行采集;步骤二:将小文件拆分为元数据和数据信息;步骤三:小文件元数据写入数据库,数据信息写入快速存储设备;步骤四:基于快速存储设备进行数据归并;对于业务存在关联性的小文件,通过关联业务合并方案合并为大文件,对于业务不存在关联性的小文件,通过非关联业务方案合并为大文件数据信息,合并后的大文件数据信息写入普通慢速存储设备。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏省公用信息有限公司,未经江苏省公用信息有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711380587.3/,转载请声明来源钻瓜专利网。
- 上一篇:一种数据库查询、数据块划分方法和装置
- 下一篇:智能运营方法及装置