[发明专利]存储数据的方法和装置有效
申请号: | 201810966238.8 | 申请日: | 2018-08-23 |
公开(公告)号: | CN110858122B | 公开(公告)日: | 2023-10-20 |
发明(设计)人: | 叶敏;林鹏;林起芊;汪渭春 | 申请(专利权)人: | 杭州海康威视系统技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 刘映东 |
地址: | 310051 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储 数据 方法 装置 | ||
本公开是关于一种存储数据的方法和装置,属于数据存储技术领域。所述方法包括:接收待存储数据,获取待存储数据对应的硬盘性能需求信息;根据预先存储于性能参数数据库中的各硬盘的性能参数,在各硬盘中,确定性能参数满足硬盘性能需求信息的多个硬盘;基于预设的单元数据量,将待存储数据切分为多个数据单元,将多个数据单元,分别存储于确定出的多个硬盘中。采用本公开,可以根据待存储数据的对应的硬盘性能需求信息,为待存储数据寻找整体性能都能满足待存储数据的需求的多个硬盘,进而可以保障存储处理的可靠性。
技术领域
本公开是关于数据存储技术领域,尤其是关于一种存储数据的方法和装置。
背景技术
在进行数据存储时,可以对数据进行分散存储。具体可以将数据进行切分,得到多个数据单元,再将多个数据单元分散存储在存储系统包括的不同存储节点中。其中,存储节点可以是OSD(Object-based Storage Device,对象存储设备)。这样,当存储系统中的一个或者少量的存储节点发生运行故障时,还可以利用未损坏的存储节点中存储的数据单元以及预先存储的校验数据对运行故障的一个或者少量的存储节点中存储的数据单元进行恢复。其中,校验数据可以是数据单元对应的异或运算的结果。
可以将不同的数据单元分别存储于不同的对象块中,这些不同的对象块可以构成一个条带。在对存储系统进行硬件部署时,可以在单个存储节点中设置多个硬盘。当需要存储数据时,可以在多个存储节点中,申请用于存储这些数据的条带。在存储节点足够多且存储节点中的硬盘中的剩余空间足够多的情况下,可以将条带包括的多个对象块分别设置在不同的存储节点中。进而,可以将不同的数据单元分别存储于不同的存储节点中,以达到对数据进行分散存储的目的。
上述存储节点中的硬盘一般是在不同时间点分批次购入的,例如,在2015年购入了100块硬盘,基于这100块硬盘构建了存储系统。由于业务扩展需求,需要提升存储系统的存储容量。因此,在2018年再次购入了100块硬盘,将这100块硬盘补充到存储系统中。再次购入的硬盘可以对已有的存储节点进行扩容,也可以构建新的存储节点。由于在不同时间点分批次购入的硬盘的生产厂家、产品型号很可能会不同,进而导致硬盘的性能也会不同。
如果条带包括的多个对象块处于具有不同性能的硬盘上,则条带的整体性能由性能最差的硬盘所决定。例如,在读写同一条带中的数据时,会同时读写条带包括的多个对象块中的数据单元,处于具有不同性能的硬盘上的对象块能够达到的读写速度不同,条带的整体读写速度与读写速度最慢的对象块的读写速度一致。
在实现本公开的过程中,发明人发现至少存在以下问题:
在存储重要的数据时,需要将重要的数据存储在整体性能较高的条带上。而现有技术中的存储方法,由于需要将同一条带中的数据分散存储在不同的硬盘上,不同的硬盘又有不同的性能,因此不能保证重要的数据被存储在整体性能较高的条带上,进而不能保障存储处理的可靠性。
发明内容
为了克服相关技术中存在的问题,本公开提供了以下技术方案:
根据本公开实施例的第一方面,提供一种存储数据的方法,所述方法包括:
接收待存储数据,获取所述待存储数据对应的硬盘性能需求信息;
根据预先存储于性能参数数据库中的各硬盘的性能参数,在所述各硬盘中,确定性能参数满足所述硬盘性能需求信息的多个硬盘;
基于预设的单元数据量,将所述待存储数据切分为多个数据单元,将所述多个数据单元,分别存储于确定出的多个硬盘中。
可选地,所述方法还包括:
当检测到发生硬盘接入事件时,获取目标硬盘的产品型号信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视系统技术有限公司,未经杭州海康威视系统技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810966238.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置