[发明专利]数据存储方法及装置在审
申请号: | 201811583162.7 | 申请日: | 2018-12-24 |
公开(公告)号: | CN111352579A | 公开(公告)日: | 2020-06-30 |
发明(设计)人: | 徐佳宏;李银 | 申请(专利权)人: | 深圳市茁壮网络股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518004 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 装置 | ||
本发明提供的数据存储方法及装置,在接收需要存储的原始数据后,在内存中分配M个第一内存数据块,并将原始数据写入至M个第一内存数据块;当M个第一内存数据块已写满数据时,在内存中分配N个第二内存数据块,并对M个第一内存数据块中的数据进行编码,再将编码后的数据写入至N个第二内存数据块;然后向信息管理模块申请包括K个磁盘数据块的条带,并将所有内存数据块中的数据并行传输至K个磁盘数据块;获取条带中数据存储成功的磁盘数据块的数目,当该数目大于或等于预设数目时,确定条带存储数据成功。本发明的数据存储方法及装置,提高了数据存储效率,缩短了数据存储等待时间,并保证了数据存储的安全性与可靠性。
技术领域
本发明涉及数据处理技术领域,更具体的说,涉及数据存储方法及装置。
背景技术
数字化社会产生了持续增长的数据存储需求,这对传统的数据存储方式提出了巨大挑战。
现有的数据存储方案主要有:方案一、先确定几个磁盘数据块,并连接至这几个磁盘数据块对应的磁盘;然后将目标数据存储到第一个磁盘数据块,等待第一个磁盘数据块存储返回结果后,再将目标数据继续存储至第二个磁盘数据块,等待第二给磁盘数据块返回结果,……,以此类推,直到目标数据存储完毕;方案二、先确定几个磁盘数据块,并连接至这几个磁盘数据块对应的磁盘;然后将目标数据存储到第一个磁盘数据块,其中,将第一个磁盘数据块作为文件数据块的主块,当主块存储数据成功后,通过文件系统在后台读取主块数据,将主块数据在其他磁盘中创建副本。
但是,大文件数据的存储,通常需要将数据存储至多个磁盘数据块中,而方案一中的数据存储方案,提供的是一个串行存储的过程,当需要存储到的磁盘数据块较多时,便会大幅增加用户存储文件数据的等待时间,严重影响存储效率;方案二虽然从一定程度上能够提高数据存储效率,但是,在数据存储完成后,恰好对应磁盘或对应的磁盘数据块坏掉了,那么磁盘数据块存储的该部分数据就会永久丢失,其数据存储的安全性与可靠性难以得到保障。
因此,目前迫切需要一种切实有效的数据存储方案,同时提高数据存储效率以及数据存储的安全性与可靠性。
发明内容
有鉴于此,本发明提供了一种数据存储方法及装置,以解决目前的数据存储方案的数据存储效率以及安全性与可靠性均较差,且无法很好地兼顾数据存储的高效性以及安全性与可靠性的技术问题。
为实现上述目的,本发明提供如下技术方案:
一种数据存储方法,所述方法包括:
接收需要存储的原始数据;
在内存中分配M个第一内存数据块,并将所述原始数据写入至所述M个第一内存数据块;M>1;
当所述M个第一内存数据块已写满数据时,在所述内存中分配N个第二内存数据块,并对所述M个第一内存数据块中的数据进行编码,再将编码后的数据写入至所述N个第二内存数据块;N>0;
向信息管理模块申请包括K个磁盘数据块的条带,并将K个内存数据块中的数据并行传输至所述K个磁盘数据块;其中,K=M+N,所述K个磁盘数据块与所述K个内存数据块一一对应,所述K个内存数据块包括所述M个第一内存数据块与所述N个第二内存数据块,所述K个磁盘数据块包括M个第一磁盘数据块与N个第二磁盘数据块;
获取所述条带中数据存储成功的磁盘数据块的数目;
当所述数据存储成功的磁盘数据块的数目大于或等于预设数目时,确定所述条带存储数据成功。
优选的,所述将所述原始数据写入至所述M个第一内存数据块包括:
获取所述M个第一内存数据块的剩余空间容量,与,所述原始数据的数据量;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市茁壮网络股份有限公司,未经深圳市茁壮网络股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811583162.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置