[发明专利]一种基于离线缓存文件操作集中记录预处理并重放的方法有效
申请号: | 201310344811.9 | 申请日: | 2013-08-09 |
公开(公告)号: | CN103514258A | 公开(公告)日: | 2014-01-15 |
发明(设计)人: | 丁亚军 | 申请(专利权)人: | 北京龙存科技有限责任公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;H04L29/08 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 100000 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 离线 缓存 文件 操作 集中 记录 预处理 重放 方法 | ||
1.一种基于离线缓存文件操作集中记录预处理并重放的方法,包括以下步骤:
A、应用服务器端将文件操作信息记录到本地;
B、应用服务器端对文件操作做预处理,删除并合并文件元数据相关操作和数据;
C、应用服务器端将预处理后的文件系统操作日志上传至元数据服务器重放,将文件内容数据按照元数据的指令上传到对应的存储服务器上。
2.根据权利要求1所述的一种基于离线缓存文件操作集中记录预处理并重放的方法,其特征在于,所述步骤A具体包括:
A1、开辟缓存:在应用服务器端,开辟一个内核态缓存,用于记录所有针对临时文件的操作文件系统操作日志,包括文件的创建、属性修改、文件内容的增删改查操作,同时开辟一块缓存存放数据缓存日志,用于记录被操作的文件内容;
A2、记录文件操作:所有文件操作相关的系统调用,在操作系统内核态,都先记录在本地缓存中,而非直接与元数据服务器、存储服务器通信,所有针对元数据的操作,记录在文件系统操作日志中;针对文件内容的操作,记录在数据缓存日志中。
3.根据权利要求1所述的一种基于离线缓存文件操作集中记录预处理并重放的方法,其特征在于,所述步骤B具体包括:积累到一定记录后,应用服务器首先在内核态中,按照时间顺序预处理文件系统操作日志,找到其中可以抵销的操作,将其删除;找到可以合并的操作,将其合并;
4.根据权利要求1所述的一种基于离线缓存文件操作集中记录预处理并重放的方法,其特征在于,所述步骤C具体包括:
C1、预处理后的文件系统操作日志在元数据服务器上重放:将预处理后的文件元数据操作文件系统操作日志上传到元数据服务器,元数据服务器收到该日志后,将其在按照时间顺序重放,并完成日志中的操作;
C2、将预处理后的数据缓存日志上传到对应的存储服务器中:元数据完成文件系统操作日志的处理之后,应用服务器根据元数据服务器的指令,将预处理后的文件数据缓存日志分别上传给对应的存储服务器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京龙存科技有限责任公司,未经北京龙存科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310344811.9/1.html,转载请声明来源钻瓜专利网。