[发明专利]数据处理方法、系统和电子设备有效
申请号: | 201810608271.3 | 申请日: | 2018-06-13 |
公开(公告)号: | CN110659251B | 公开(公告)日: | 2023-03-21 |
发明(设计)人: | 石超;张小路;张乐 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/16 | 分类号: | G06F16/16;G06F16/17;G06F16/18;G06F11/14 |
代理公司: | 北京同钧律师事务所 16037 | 代理人: | 许怀远 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 系统 电子设备 | ||
本申请实施例公开一种数据处理方法、系统和电子设备,该方法应用于存储系统,所述存储系统使用N个文件系统存储数据,N为大于或等于2的正整数,该方法包括:接收用户的访问请求;确定所述N个文件系统中的数据文件中的目标数据文件;将所述访问请求相关的目标数据写入所述目标数据文件。
技术领域
本申请涉及计算机网络技术领域,更具体地涉及数据处理方法、系统和电子设备。
背景技术
一个日志型存储系统将其中的数据以文件的形式存储在一个文件系统中,通常这些数据集中在一个或多个特点的目录中。当日执行存储系统收到用户的请求时,将用户的请求转化为对文件系统的读写操作。
当文件系统故障时,日志型存储系统不能正常写数据,影响服务可用性。为了提升日志型存储系统的可用性,目前常用的方法是搭建两个及以上存储系统,在这些存储系统间复制数据。以两个日志型存储系统为例,称为存储系统1和存储系统2,在两个文件系统均无故障时,用户的写访问请求发送到日志型存储系统1,日志型存储系统1将与写访问请求相关的数据写入文件系统1,并将用户的写请求发送给日志型存储系统2,日志型存储系统2将与写访问请求相关的数据写入到文件系统2。当文件系统1出现故障时,用户的写访问请求发送到日志型存储系统2,日志型存储系统2将与写访问请求相关的数据写入文件系统2,当出现故障的文件系统1恢复后,日志型存储系统1从日志型存储系统2获取故障期间的数据差异,并将差异数据写入文件系统1,完成数据同步。
但目前提高存储系统可用性的方法,需要将用户的写访问请求相关的数据复制存储到多个文件系统,需消耗额外的网络带宽,并且数据同时存储在多个文件系统中,导致存储成本较高。
因此,需要一种数据处理方法,来克服上述技术问题。
发明内容
本申请的目的在于提供一种数据处理方法、系统和电子设备,能够在不带来额外网络带宽和不增加存储成本的基础上提高存储系统的可用性。
第一方面,提供了一种数据处理方法,应用于存储系统,存储系统使用N个文件系统存储数据,N为大于或等于2的正整数,方法包括:接收用户的访问请求;确定N个文件系统中的数据文件中的目标数据文件;将访问请求相关的目标数据写入目标数据文件。
第二方面,提供了一种数据处理方法,应用于文件系统,文件系统可用于存储存储系统中的数据,存储系统使用N个文件系统存储数据,N个文件系统中包括该文件系统,方法包括:接收存储系统发送的文件创建请求,文件系统是由存储系统在确定可用数据文件集合为空时从N个文件系统中的可用文件系统中选择出的;基于文件创建请求创建第一数据文件;接收存储系统发送的用于请求写入目标数据的数据写入请求,目标数据与存储系统接收到的用户的访问请求相关;将目标数据写入第一数据文件。
第三方面,提供了一种数据处理系统,数据处理系统包括存储系统和N个文件系统,存储系统使用N个文件系统存储数据,N为大于或等于2的正整数;存储系统包括:第一收发单元,接收用户的访问请求;确定单元,在确定存储系统中的可用数据文件集合为空时,从N个文件系统中的可用文件系统中选择第一文件系统;第一文件系统包括:第二收发单元,接收存储系统发送的文件创建请求;文件创建单元,基于文件创建请求创建第一数据文件;第二收发单元,接收存储系统发送的用于请求写入目标数据的写入请求,目标数据与存储系统接收到的用户的访问请求相关;写入单元,将目标数据写入第一数据文件。
第四方面,提供了一种计算机可读介质,所述计算机可读介质存储一个或多个程序,所述一个或多个程序当被包括存储系统和N个文件系统的数据处理系统执行时,使得数据处理系统执行以下操作:接收用户的访问请求;在确定存储系统中的可用数据文件集合为空时,从N个文件系统中的可用文件系统中选择第一文件系统;在第一文件系统上创建第一数据文件;将访问请求相关的目标数据写入第一数据文件;其中,存储系统使用N个文件系统存储数据,N为大于或等于2的正整数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810608271.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:文件处理方法和系统
- 下一篇:基于云的生物信息数据交付方法、装置和电子设备