[发明专利]分布式文件系统存储管理方法、装置、设备及存储介质在审
申请号: | 201910877103.9 | 申请日: | 2019-09-17 |
公开(公告)号: | CN110688360A | 公开(公告)日: | 2020-01-14 |
发明(设计)人: | 杨朔;牛勇刚 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/172;G06F16/11;G06F16/13 |
代理公司: | 11227 北京集佳知识产权代理有限公司 | 代理人: | 张春辉 |
地址: | 250101 山东省济南市高新区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 热度 分布式文件系统 热度信息 预设 存储管理装置 可读存储介质 存储管理 存储空间 获取目标 检测文件 冷热状态 目标文件 判定目标 请求响应 数据存储 数据访问 文件判别 文件请求 文件添加 系统性能 资源条件 访问 响应 | ||
本发明公开了一种分布式文件系统存储管理方法,通过获取目标文件的访问热度信息,并根据访问热度信息对目标文件进行热度文件判别,当判定目标文件为热度文件时,将热度文件添加至预设高性能存储区。该方法可以实时的检测文件热度特性,区分数据访问的冷热状态,并将用户经常访问的数据存储到高性能存储区,预设的高性能存储区相对于其他存储空间的请求响应速度更优,从而可以提升频繁接受文件请求的热度文件的响应速度,相对实现在有限的资源条件下提高系统性能的目的。本发明还提供了一种分布式文件系统存储管理装置、设备及可读存储介质,具有上述有益效果。
技术领域
本发明涉及分布式文件系统技术领域,特别涉及一种分布式文件系统存储管理方法、装置、设备及可读存储介质。
背景技术
分布式文件系统通过将数据分布保存在多个服务器的多个磁盘上来实现数据的海量存储和快速部署。由于其资源共享性、透明性以及高可用性等优势,分布式文件系统被广泛应用。
目前的分布式文件系统的文件存储是随机分布存储的,然而该种文件存储方式面对越来越频繁的文件请求的响应速度有限,越来越不能满足高速化的用户体验需求。
因此,如何提升分布式文件存储系统的访问性能,是本领域技术人员需要解决的技术问题。
发明内容
本发明的目的是提供一种分布式文件系统存储管理方法,该方法可以提升分布式文件存储系统的访问性能;本发明的另一目的是提供一种分布式文件系统存储管理装置、设备及一种可读存储介质。
为解决上述技术问题,本发明提供一种分布式文件系统存储管理方法,包括:
获取目标文件的访问热度信息;
根据所述访问热度信息对所述目标文件进行热度文件判别;
当判定所述目标文件为热度文件时,将所述热度文件添加至预设高性能存储区。
可选地,所述获取目标文件的访问热度信息,包括:
监控所述目标文件的文件IO操作,并根据监控信息进行文件热度的更新,生成访问热度信息;
获取实时更新后的所述访问热度信息。
可选地,监控所述目标文件的文件IO操作,并根据监控信息进行文件热度的更新,生成访问热度信息,包括:
当检测到所述目标文件存在文件IO访问操作时,生成访问信息;
根据所述访问信息进行文件热度的更新,生成访问热度信息。
可选地,根据所述访问热度信息对所述目标文件进行热度文件判别,包括:
在一个统计周期内根据所述目标文件的访问热度信息判定文件热度超过设定阈值时,则判定所述目标文件为热度文件。
可选地,当判定所述目标文件为热度文件时,将所述热度文件添加至预设高性能存储区,包括:
根据历史热度文件与当前热度文件间的文件差异对所述预设高性能存储区进行文件添加。
可选地,根据历史热度文件与当前热度文件间的文件差异对所述预设高性能存储区进行文件添加,包括:
将所述热度文件的文件信息插入第一文件热度索引表中;
在当前热度统计周期结束后,对所述第一文件热度索引表中文件信息进行存盘记录;
在下一个热度统计周期内,将所述热度文件的文件信息记录于第二文件热度索引表中;
通过比对所述第一文件热度索引表与所述第二文件热度索引表中文件的差异,确定所述预设高性能存储区的待迁入的文件信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910877103.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种日志分析方法与管理平台
- 下一篇:数据迁移方法、电子装置及计算机设备