[发明专利]一种云存储系统的数据写入方法、装置及云存储系统在审
申请号: | 201611248364.7 | 申请日: | 2016-12-29 |
公开(公告)号: | CN106657356A | 公开(公告)日: | 2017-05-10 |
发明(设计)人: | 吴明桥 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司11227 | 代理人: | 罗满 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 存储系统 数据 写入 方法 装置 | ||
技术领域
本发明涉及数据存储技术领域,特别是涉及一种云存储系统的数据写入方法、装置以及云存储系统。
背景技术
随着移动互联网、物联网等的飞跃式发展,个人数据、家庭数据、企业数据等都呈现爆发式增长,海量数据时代悄然到来。同时这些数据己经从单纯的关系型数据向非关系型数据转换,如图片、音频、视频、文档等,传统的存储管理方式己经无法满足这类数据的存储需求,如何有效的存储、管理、维护这类非关系型数据被越来越多的业内人数所重点关注。
云存储是指通过集群应用、网格技术或分布式文件系统等功能,网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统,保证数据的安全性,并节约存储空间。简单来说,云存储就是将储存资源放到云上供人存取的一种新兴方案。使用者可以在任何时间、任何地方,透过任何可连网的装置连接到云上方便地存取数据。就如同云状的广域网和互联网一样,云存储对使用者来讲,不是指某一个具体的设备,而是指一个由许许多多个存储设备和服务器所构成的集合体。使用者使用云存储,并不是使用某一个存储设备,而是使用整个云存储系统带来的一种数据访问服务。
云存储技术的飞速发展,使得云存储成为了一个新型的数据存储解决方案。近两年,国内的云存储技术也取得了蓬勃的发展,各厂商纷纷推出自己的云存储产品,云存储领域呈现出了欣欣向荣的景象。但总体来说,国内云存储技术还处于发展阶段。现有存储节点在对大数据进行写入的过程中,由于大容量存储设备的性能的限制,容易导致客户端出现卡顿、写操作出现延迟、影响存储性能的现象。
发明内容
本发明的目的是提供一种云存储系统的数据写入方法、装置以及云存储系统,以解决现有云储存系统中容易出现卡顿现象、写操作延迟较多、存储性能较低的问题。
为解决上述技术问题,本发明提供一种云存储系统的数据写入方法,所述云存储系统的存储节点上至少包含一个高速存储设备以及一个大容量存储设备,所述方法包括:
接收客户端节点发送的写请求,并将所述客户端节点进行纠删码处理后的待写入数据写入到所述高速存储设备;
在写入完后后,向所述客户端节点发送完成响应;
接收所述客户端节点发送的持久化请求,将所述待写入数据持久化写入到所述大容量存储设备。
可选地,在所述将所述待写入数据持久化写入到所述大容量存储设备之后还包括:
删除存储在所述高速存储设备上相应的版本化数据。
可选地,还包括:
每个存储节点通过心跳机制检测其他存储节点的运行状态;
当检测到一个或多个存储节点的状态发生异常时,处于正常状态的各节点之间比较所述高速存储设备中数据的版本号,以版本最低的数据作为基准数据,将其他节点中大于所述基准数据的版本号的数据进行删除。
可选地,所述高速存储设备为固态硬盘或非易失性存储器;所述大容量存储设备为机械硬盘或磁盘阵列。
本发明还提供了一种云存储系统的数据写入装置,所述云存储系统的存储节点上至少包含一个高速存储设备以及一个大容量存储设备,所述装置包括:
第一写入模块,用于接收客户端节点发送的写请求,并将所述客户端节点进行纠删码处理后的待写入数据写入到所述高速存储设备;
响应模块,用于在写入完后后,向所述客户端节点发送完成响应;
第二写入模块,用于接收所述客户端节点发送的持久化请求,将所述待写入数据持久化写入到所述大容量存储设备。
本发明还提供了一种云存储系统,包括:
客户端节点以及多个存储节点组成的存储集群;所述存储集群中的每个存储节点上至少包含一个高速存储设备以及一个大容量存储设备;
其中,所述客户端节点用于接收用户的写请求,对待写入数据进行纠删码处理,并将纠删码处理后的数据发送至指定的存储节点;
所述存储节点接收所述客户端节点发送的写请求,并将所述待写入数据写入到所述高速存储设备,在写入完成后,向所述客户端节点发送完成响应;
所述客户端节点在接收到所述完成响应后,向所述存储节点发送持久化请求;
所述存储节点接收所述持久化请求,将所述待写入数据持久化写入到所述大容量存储设备。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611248364.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种集群管理方法及设备
- 下一篇:发送离线消息的方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置