[发明专利]数据分层式存储方法、装置及存储介质有效
申请号: | 202110885239.1 | 申请日: | 2021-08-03 |
公开(公告)号: | CN113590045B | 公开(公告)日: | 2023-05-16 |
发明(设计)人: | 童俊杰;韩振东;赫罡;马田丰;王志会;高功应 | 申请(专利权)人: | 中国联合网络通信集团有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F16/21 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张娜;黄健 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 分层 存储 方法 装置 介质 | ||
本申请提供一种数据分层式存储方法、装置及存储介质,该方法包括:先获取被访问数据块,再确定分层式存储系统中是否存在该被访问数据块,若否,则将被访问数据块存储在内存中,若是,则确定被访问数据块的业务优先级,根据业务优先级,确定被访问数据块在分层式存储系统中的目标存储位置;最终在目标存储位置存储被访问数据块。通过上述数据分层式存储方法,根据数据块的被访问次数和业务优先级,确定数据块的存储位置,提高了存储系统对数据块的访问性能和性价比。
技术领域
本申请涉及计算机领域,尤其涉及一种数据分层式存储方法、装置及存储介质。
背景技术
随着大数据时代来临,数据规模增长迅速。为了有效解决大数据的存储管理问题,目前出现了多种大规模分布式数据存储系统。为了满足大数据场景下读写操作的性能瓶颈,分层式存储系统成为当前研究的热点。
目前,在分层式存储系统下,当上一层可用存储空间不足时,会逐层向下查询可用存储空间,直到可用存储空间的大小可以满足需求即可进行该可用存储空间的分配。另外,固态硬盘特点为读写寿命短但是速度快,机械硬盘读写寿命长但故障频发。
因此,现有技术中未充分根据各个存储层的特点对其加以应用,从而无法充分保证其访问性能和性价比。
发明内容
为了解决上述问题,本申请提供了一种数据分层式存储方法、装置及存储介质,以保障数据的访问性能。
第一方面,本申请提供了一种数据分层式存储方法,包括:
获取被访问数据块;
确定分层式存储系统中是否存在被访问数据块;
若否,则将被访问数据块存储在内存中;
若是,则确定被访问数据块的业务优先级;根据业务优先级,确定被访问数据块在分层式存储系统中的目标存储位置;在目标存储位置存储被访问数据块。
一种可能的实施方式中,存储层包含第一区域,第一区域用于存储在对应存储层中访问次数小于访问次数阈值的数据块,将被访问数据块存储在内存中,包括:确定内存的第一区域中可用存储空间的大小是否大于或者等于被访问数据块的大小;若是,则基于第一区域对应的存储形式,将被访问数据块存储在可用存储空间中;若否,则基于第一区域对应的存储形式,将第一区域中已存储的数据块迁移至内存的下一层存储层,并将被访问数据块存储至第一区域的可用存储空间中。
一种可能的实施方式中,存储层包含第一区域和第二区域,第一区域用于存储在对应存储层中访问次数小于访问次数阈值的数据块,第二区域用于存储在对应存储层中访问次数大于或者等于访问次数阈值的数据块,根据业务优先级,确定被访问数据块在分层式存储系统中的目标存储位置,包括:若业务优先级大于优先级阈值,则基于第二区域对应的存储形式,确定被访问数据块在对应存储层的第二区域的目标存储位置;若业务优先级小于或者等于优先级阈值,则基于被访问数据块当前所在存储区域对应的存储形式,确定被访问数据块当前所在存储区域的目标存储位置。
一种可能的实施方式中,基于第二区域对应的存储形式,确定被访问数据块在分层式存储系统中对应存储层的第二区域的目标存储位置之前,还包括:确定被访问数据块的当前存储位置;若当前存储位置在第一区域,则确定对应存储层的第二区域中可用存储空间的大小大于或者等于被访问数据块的大小。
一种可能的实施方式中,还包括:若对应存储层的第二区域中可用存储空间的大小小于被访问数据块的大小,则基于对应存储层的第二区域对应的存储形式,将对应存储层的第二区域中已存储的数据块迁移至对应存储层的第一区域中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国联合网络通信集团有限公司,未经中国联合网络通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110885239.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置