[发明专利]一种针对Hadoop分布式文件系统的存储优化方法有效
| 申请号： | 202110644122.4 | 申请日： | 2021-06-09 |
| 公开（公告）号： | CN113377733B | 公开（公告）日： | 2022-12-27 |
| 发明（设计）人： | 王周恺;贾乔;马维纲;王怀军;曹霆;李宇昕;王侃 | 申请（专利权）人： | 西安理工大学 |
| 主分类号： | G06F16/18 | 分类号： | G06F16/18;G06F16/182;G06F16/172;G06F16/16 |
| 代理公司： | 西安弘理专利事务所 61214 | 代理人： | 刘娜 |
| 地址： | 710048 陕*** | 国省代码： | 陕西;61 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种针对Hadoop分布式文件系统的存储优化方法，具体为：首先，选取INFO级别日志文件，所选取的日志文件包含具体执行时间戳和文件名信息，获取INFO级别日志文件的访问记录和删除记录；将IFNO级别日志中所有包含关键词的信息提取并整理，再按照时间戳进行排序并编号；之后确定特征标签，选取特征，构建特征向量，形成训练文件淘汰模型的样本集；选择特征向量的三个特征值依次作为决策树的三个分类节点，采用ID3算法建立决策树，并由决策树构建文件淘汰模型；最后，使用建立的文件淘汰模型，预测文件可复用性。本发明的方法，优化分布式文件系统的存储效率，减小数据存储规模，提HDFS的存储效率。 | ||
| 搜索关键词： | 一种 针对 hadoop 分布式 文件系统 存储 优化 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于西安理工大学，未经西安理工大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110644122.4/，转载请声明来源钻瓜专利网。
