[发明专利]数据存储方式转换方法及系统在审
申请号: | 201910451919.5 | 申请日: | 2019-05-28 |
公开(公告)号: | CN112015585A | 公开(公告)日: | 2020-12-01 |
发明(设计)人: | 徐佳宏;李银;李威青;刘勇;刘彬 | 申请(专利权)人: | 深圳市茁壮网络股份有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518004 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方式 转换 方法 系统 | ||
本发明提供的数据存储方式转换方法,应用于数据存储方式转换系统;该系统包括:数据处理服务器、编码处理服务器与信息管理设备;该方法包括:利用数据处理服务器将原始数据存储至备份式存储条带;当备份式存储条带存储数据成功时,利用信息管理设备将备份式存储条带的状态设置为第一预设状态;当编码处理服务器符合预设编码条件时,利用编码处理服务器获取目标备份式存储条带所存储的目标数据,并生成与目标数据相对应的编码数据;利用编码处理服务器将目标数据与编码数据存储至编码式存储条带。本发明通过数据处理服务器与编码处理服务器相分离以及备份式存储过程与数据存储方式转换过程相分离,从整体上降低了该系统中各服务器的负载压力。
技术领域
本发明涉及数据存储技术领域,更具体的说,涉及数据存储方式转换方法及系统。
背景技术
在分布式文件系统中,在对数据进行备份式存储后,通常还需要对其进行编码式存储。在备份式存储中,原始数据与镜像数据的存储空间占比至少为1:1;而在编码式存储中,原始数据与编码数据的存储空间占比通常为2:1,甚至更大。可见,编码式存储方式比备份式存储方式更能够节省数据的存储空间。
目前,将数据从备份式存储转换成编码式存储的过程中,通常是由一台数据处理服务器在将一个备份式存储条带存储满了以后,即刻在该数据处理服务器中对读取到的数据进行编码处理,再将编码后的数据再存储到编码式存储条带中。但是,在同一个服务器,甚至同一个进程中,以紧凑的、持续不间断的方式,来执行备份式数据存储过程与存储方式转换过程,必然会导致服务器的内存消耗显著增加,IO数据量显著增大,并在出现大量计算的时候将会导致该服务器拥堵,进而导致其他服务程序出现响应问题,导致业务运行不流畅;而且还会导致服务器的CPU资源的大量消耗,导致该服务器的其他业务运行出现异常。
因此,目前迫切需要一种切实有效的数据存储方式转换方案,以避免数据处理过程对服务器带来过大的负载压力。
发明内容
有鉴于此,本发明提供了一种数据存储方式转换方法及系统,以解决现有数据存储方式转换方案会对服务器造成的负载压力过大,影响服务器业务正常运行的技术问题。
为实现上述目的,本发明提供如下技术方案:
一种数据存储方式转换方法,应用于数据存储方式转换系统;所述系统包括:数据处理服务器、编码处理服务器与信息管理设备;所述方法包括:
利用所述数据处理服务器将原始数据存储至备份式存储条带;所述备份式存储条带包括多个数据块组,其中,每个数据块组均用于存储所述原始数据,各个数据块组所存储的数据之间互为备份;
当所述备份式存储条带存储数据成功时,利用所述信息管理设备将所述备份式存储条带的状态设置为第一预设状态;
当所述编码处理服务器符合预设编码条件时,利用所述编码处理服务器获取目标备份式存储条带所存储的目标数据,并生成与所述目标数据相对应的编码数据;所述目标备份式存储条带为具有所述第一预设状态的任一备份式存储条带;所述目标数据为所述目标备份式存储条带所存储的原始数据;
利用所述编码处理服务器将所述目标数据与所述编码数据存储至编码式存储条带;所述编码式存储条带包括原始数据块与编码数据块,所述原始数据块用于存储所述目标数据,所述编码数据块用于存储所述编码数据。
优选的,所述利用所述数据处理服务器将原始数据存储至备份式存储条带包括:
利用所述数据处理服务器将原始数据分别存储至备份式存储条带的各个数据块组;
将所述备份式存储条带中存储数据成功的数据块组的健康值设置为第一预设值;
当所述备份式存储条带中至少一个数据块组的健康值为第一预设值时,确定所述备份式存储条带存储数据成功。
优选的,所述编码处理服务器符合预设编码条件包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市茁壮网络股份有限公司,未经深圳市茁壮网络股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910451919.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种虚拟网络功能的实例化方法及装置
- 下一篇:钻具吊卡
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置