[发明专利]分布式表格系统的数据读取方法、装置及系统有效
申请号: | 201911120440.X | 申请日: | 2019-11-15 |
公开(公告)号: | CN111049883B | 公开(公告)日: | 2022-09-06 |
发明(设计)人: | 万进 | 申请(专利权)人: | 北京金山云网络技术有限公司;北京金山云科技有限公司 |
主分类号: | H04L67/60 | 分类号: | H04L67/60;H04L67/56;H04L67/1095;H04L67/1097;H04L67/1001;G06F16/182 |
代理公司: | 北京博遵律师事务所 11761 | 代理人: | 马佑平 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 表格 系统 数据 读取 方法 装置 | ||
本发明公开了一种分布式表格系统的数据读取方法、装置、系统、电子设备及计算机可读存储介质。该方法包括:接收客户端发送的读取请求;响应读取请求,以获取与读取请求对应数据副本所在的存储服务器列表;向存储服务器列表中的第一存储服务器发送读取请求;以及在发送读取请求的同时启动延时任务,以在预定延迟时间后向存储服务器列表中的第二存储服务器发送读取请求。本发明可以避免因某台存储服务器慢而影响整个集群的读请求延时。
技术领域
本发明涉及分布式表格系统技术领域,尤其涉及一种分布式表格系统的数据读取方法、装置及系统。
背景技术
随着互联网数据规模日渐骤增,分布式存储系统应运而生。分布式存储系统按功能分类可以分为分布式文件系统、分布式对象存储、块存储和分布式表格系统几种。在分布式表格系统中,为了保证数据安全,容忍坏盘和服务器宕机,一般会采用多副本来存储数据。分布式表格系统的多副本,其中一份数据副本作为主,其它数据副本作为从,分布式表格系统依靠数据副本的主从关系保持数据在副本之间的一致性。
通常在读取数据时,首先数据的读取请求从客户端发往代理服务器集群的某台服务器,代理服务器找到所请求数据的多个副本存储的存储服务器列表,然后代理服务器将请求发往对应存储服务器,从存储服务器上读取副本内容。
在存在数据多副本的背景下,对于数据的读取请求,首先代理服务器找到请求数据的各个副本存储的存储服务器列表,然后代理服务器向存储服务器发送读取请求,通常发送请求有下面两种方式:
方案一:代理服务器首先给主副本所在的存储服务器发送请求,如果主副本所在的存储服务器超时或者失败,则依次向其他从副本所在的存储服务器发送请求,直至代理服务器超时;
方案二:代理服务器并发地向多个或者全部副本所在的存储服务器发送请求,在第一个存储服务器返回成功后,代理服务器向客户端返回数据。
但是上述方案一存在的问题是,如果某台存储服务器发生异常变得很慢,则对这台存储服务器上的数据副本的读请求都会受到影响,极大地影响读请求延时;
对于方案二的问题是,假设数据副本数量为N个,则对于一条客户端读请求,代理服务器将会对存储服务器集群发送N条请求,这样使得读请求压力放大了N倍,极大程度地加大了对存储服务器的压力。
发明内容
本发明的目的在于提供一种分布式表格系统的数据读取方法、装置、系统、电子设备及计算机可读存储介质,以避免因某台存储服务器慢而影响整个集群的读请求延时。
根据本发明的第一方面,提供了一种分布式表格系统的数据读取方法,执行在代理服务器端,所述方法包括:
接收客户端发送的读取请求;
响应读取请求,以获取与读取请求对应数据副本所在的存储服务器列表;
向存储服务器列表中的第一存储服务器发送读取请求;以及
在发送读取请求的同时启动延时任务,以在预定延迟时间后向存储服务器列表中的第二存储服务器发送读取请求。
优选地,所述方法还包括:
在到达预定延迟时间之前,若第一存储服务器返回读取请求成功,取消延时任务。
优选地,所述方法还包括:
在第一存储服务器返回读取请求失败或者读取请求超时,向存储服务器列表中的第三存储服务器发送读取请求。
优选地,所述方法还包括:
在第二存储服务器返回读取请求失败或者读取请求超时,选择存储服务器列表中的第三存储服务器发送读取请求。
根据本发明的第二方面,提供了一种代理服务器,用于读取分布式表格系统的数据,所述代理服务器包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司;北京金山云科技有限公司,未经北京金山云网络技术有限公司;北京金山云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911120440.X/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种碳化硅基纳米复合吸波材料制备方法及其应用
- 下一篇:一种少维护照明系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置