[发明专利]一种数据缓存的方法、系统、计算机存储介质及移动终端在审
申请号: | 202210935561.5 | 申请日: | 2022-08-04 |
公开(公告)号: | CN115203074A | 公开(公告)日: | 2022-10-18 |
发明(设计)人: | 王世珍;郑自浩;杨东虎 | 申请(专利权)人: | 南京雷鲨信息科技有限公司 |
主分类号: | G06F12/0866 | 分类号: | G06F12/0866 |
代理公司: | 上海雍灏知识产权代理事务所(普通合伙) 31368 | 代理人: | 沈汶波 |
地址: | 210022 江苏省南京市*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 缓存 方法 系统 计算机 存储 介质 移动 终端 | ||
本发明涉及计算机缓存技术领域,尤其涉及一种数据缓存的方法、系统、计算机存储介质及移动终端。包括步骤:基于Checkpoint时生成Checkpointio并发送至Dmcache设备上;元数据io经Dmcache设备时直接存入原始磁盘设备中;等待缓存设备数据在时间阈值内回写存入原始磁盘设备反应是否超时;缓存设备数据回写存入原始磁盘设备未超时则将本次Checkpoint写入文件系统;若缓存设备数据回写存入原始磁盘设备超时,文件系统维持上一次Checkpoint,元数据和数据仍一致。解决了在F2FS文件系统上使用Dmcache时保证Checkpoint的一致性。
技术领域
本发明涉及计算机缓存技术领域,尤其涉及一种数据缓存的方法、系统、计算机存储介质及移动终端。
背景技术
F2FS文件系统是为flash设备设计的一个日志结构型的文件系统,其闪存设备物理区域布局如图3所示,整个存储设备区域被F2FS格式化为6个区域,分别是Superblock、Checkpoint、Segment Info Table、Node Address Table、Segment Summary Area以及MainArea,前五个区域称为元数据区域(Metadata Area),保存的是跟F2FS直接相关的元信息,而最后一个区域是保存文件数据的主要区域,主要保存了node数据、文件data数据、目录数据,比如NAT区建立一张表保持了每一个node的物理地址信息。F2FS的每一个node id(nid),以它做索引在NAT查找此Node区的物理地址,node数据结构中又有nid成员标识,其两者的对应关系参阅图4所示。
F2FS依赖Checkpoint保证其数据一致性,系统在写Checkpoint时会将系统的block、node等分配状态、NAT/SIT页缓冲数据写到磁盘相应的元数据区,用于被关闭/崩溃时复原整个系统的block、node的分配状态,因Checkpoint会带来很大的开销,所以不是每次写入数据都做,而是隔一段时间做一次。
Dmcache技术主要用在服务器存储上加快磁盘的读写速度,其设计成由三个物理存储设备来混合成一个逻辑卷的形式,三个物理设备分别为:原始磁盘设备,提供主要的慢速存储,最终数据罗盘到此设备中;缓存设备,提供高速原始磁盘设备数据的缓存;元数据设备,记录硬盘块在缓存中的位置,缓存页面是否被写以及执行缓存策略所需的内部数据。参阅图5所示,在读写Dmcache设备时,如果缓存命中,则直接从缓存设备中读写数据,不需要访问后端的慢速的原始磁盘设备,极大地提高了系统的io性能,移动终端可在F2FS文件系统上使用RAM做缓存设备的Dmcache大幅提升其存储性能,但RAM的易失性可能会导致文件系统损坏,若最近一次F2FSCheckpoint时缓存设备中有数据未刷回原始磁盘设备,在系统异常掉电时,NAT区记录的块地址信息和Node区记录的nide id信息未被写入原始磁盘设备相应的NAT区和Node区,在下次文件系统启动时会检测到设备物理区域元数据区和数据区一致性存在问题,例如:文件系统启动时会根据nide id和NAT区找到此nide相应的块地址,然后以此块地址在Node区找到相应的node文件的node id信息反向校验,从而导致文件系统启动失败。
综上所述,本发明实际解决的技术问题是如何解决在F2FS文件系统上使用Dmcache时保证Checkpoint的一致性。
发明内容
为了克服上述技术缺陷,本发明的目的在于提供一种数据缓存的方法、系统、计算机存储介质及移动终端,解决了在F2FS文件系统上使用Dmcache时保证Checkpoint的一致性。
本发明公开了一种,文件系统的数据缓存的方法,包括步骤:
基于Checkpoint时生成Checkpoint io并发送至Dmcache设备上;
元数据io经Dmcache设备时直接存入原始磁盘设备中;
等待缓存设备数据在时间阈值内回写存入原始磁盘设备反应是否超时;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京雷鲨信息科技有限公司,未经南京雷鲨信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210935561.5/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置