[发明专利]数据存储方法、装置及系统有效
申请号: | 201410191627.X | 申请日: | 2014-05-07 |
公开(公告)号: | CN105100146B | 公开(公告)日: | 2018-07-20 |
发明(设计)人: | 娄继冰 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F3/06 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 何平;邓云鹏 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 装置 系统 | ||
本发明提供了一种数据存储方法,包括:接收上传的分片数据,提取所述分片数据的数据标识;获取存储节点的存储状态,根据所述存储状态选取存储节点,根据所述数据标识向存储节点请求分配存储空间;接收所述存储节点返回的与所述数据标识对应的存储地址标识,所述存储地址标识与存储节点为所述数据标识分配的存储单元上的偏移位置对应;将所述分片数据发送至所述存储地址标识对应的存储位置进行存储。此外,还提供了一种数据存储装置和系统。上述数据存储方法、装置及系统能够提高存储效率。
技术领域
本发明涉及计算机技术领域,特别是涉及一种数据存储方法、装置及系统。
背景技术
现有的网络存储技术通常以分片数据的形式存储文件或其他数据,即将较小的文件或较大文件分片后得到的分片数据存储在多个存储节点上。例如谷歌公司的GFS(GoogleFile System,谷歌文件系统),即通过对分片数据的进行哈希后,根据哈希值定位到相应的存储节点,然后将分片数据发送至该存储节点存储。
然而,该数据存储方法由于是根据分片数据的哈希值选择存储节点(基本等同于随机选取),使得在某些存储节点带宽不够或存储负载较高或存储空间不足时,存储效率较低,即时重新选择存储节点,而重新选择的过程也导致存储效率较低。
发明内容
基于此,有必要提供一种能够提高存储效率的数据存储方法。
一种数据存储方法,包括:
接收上传的分片数据,提取所述分片数据的数据标识;
获取存储节点的存储状态,根据所述存储状态选取存储节点,根据所述数据标识向存储节点请求分配存储空间;
接收所述存储节点返回的与所述数据标识对应的存储地址标识,所述存储地址标识与存储节点为所述数据标识分配的存储单元上的偏移位置对应;
将所述分片数据发送至所述存储地址标识对应的存储位置进行存储。
此外,还有必要提供一种能够提高存储效率的数据存储装置。
一种数据存储装置,包括:
数据接收模块,用于接收上传的分片数据,提取所述分片数据的数据标识;
存储节点选择模块,用于获取存储节点的存储状态,根据所述存储状态选取存储节点,根据所述数据标识向存储节点请求分配存储空间;
存储地址获取模块,用于接收所述存储节点返回的与所述数据标识对应的存储地址标识,所述存储地址标识与存储节点为所述数据标识分配的存储单元上的偏移位置对应;
数据存储模块,用于将所述分片数据发送至所述存储地址标识对应的存储位置进行存储。
此外,还有必要提供一种能够提高存储效率的数据存储系统。
一种数据存储系统,包括门面节点和存储节点,其中:
门面节点用于接收上传的分片数据,获取存储节点的存储状态,根据所述存储状态选取存储节点,向所述存储节点发送存储空间分配请求;
存储节点用于为所述存储空间分配请求分配存储单元,并获取所述存储单元上的空闲的存储位置的偏移量,根据所述分配的存储单元和偏移量生成存储地址标识,返回所述门面节点。
门面节点用于将所述分片数据发送至所述存储地址标识对应的存储节点;
存储节点用于根据所述存储地址标识存储所述分片数据。
此外,还有必要提供一种能够提高存储效率的数据存储方法。
一种数据存储方法,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410191627.X/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置