[发明专利]基于多云存储的数据访问方法、装置、计算机设备及介质在审
申请号: | 202111063629.7 | 申请日: | 2021-09-10 |
公开(公告)号: | CN113885794A | 公开(公告)日: | 2022-01-04 |
发明(设计)人: | 陈旃 | 申请(专利权)人: | 鸬鹚科技(深圳)有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F9/50 |
代理公司: | 深圳市世联合知识产权代理有限公司 44385 | 代理人: | 刘畅 |
地址: | 518000 广东省深圳市前海*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 多云 存储 数据 访问 方法 装置 计算机 设备 介质 | ||
1.一种基于多云存储的数据访问方法,应用于多云存储网关中,其特征在于,所述基于多云存储的数据访问方法包括:
在接收到客户端发送的数据访问请求时,通过集群通信的方式,对集群中每个节点进行活性探测,得到节点状态;
将所述节点状态为激活的节点,作为有效节点;
采用针对S3协议的调度算法,对所述访问请求进行调度分配,将所述访问请求中的写入请求平均分配到每个所述有效节点,并将所述访问请求中的读取请求发送到当前进行多云存储对象的站点;
采用令牌桶算法对每个所述有效节点的写入请求进行流量控制,在所述写入请求的数量超过预设阈值时进行及时预警限制;
在将读取请求发送到当前进行多云存储对象站点后,采用服务质量QOS对存储进行控制。
2.如权利要求1所述的基于多云存储的数据访问方法,其特征在于,所述通过集群通信的方式,对集群中每个节点进行活性探测,得到节点状态包括:
基于集群通信,向每个所述节点发送心跳包检测指令;
根据每个所述节点针对所述心跳包检测指令的反馈结果,确定每个所述节点对应的节点状态。
3.如权利要求1所述的基于多云存储的数据访问方法,其特征在于,所述多云存储网关部署有ECS多数据中心,所述采用针对S3协议的调度算法,对所述访问请求进行调度分配,将所述访问请求中的写入请求平均分配到每个所述有效节点包括:
对所述每个有效节点的主机地址进行解析,得到每个有效节点的主机地址格式,其中,所述主机地址格式包括路径格式和虚拟主机格式;
基于所述主机地址格式,生成ECS多数据中心的全局负载均衡策略;
基于所述全局负载均衡策略,对所述访问请求进行调度分配,将所述访问请求中的写入请求平均分配到每个所述有效节点。
4.如权利要求1所述的基于多云存储的数据访问方法,其特征在于,所述将所述访问请求中的读取请求发送到当前进行多云存储对象的站点包括:
对所述客户端的IP地址进行监测;
若所述客户端的IP地址为IPv6类型,对所述客户端地址进行转换,得到IPv4类型的IP地址;
基于所述IPv4类型的IP地址,对所述问请求中的读取请求进行存储处理。
5.如权利要求1至4任一项所述的基于多云存储的数据访问方法,其特征在于,所述采用令牌桶算法对每个所述有效节点的写入请求进行流量控制,在所述写入请求的数量超过预设阈值时进行及时预警限制包括:
针对每个所述有效节点,获取所述写入请求总数A和每个写入请求的标识信息,其中,A为正整数;
获取补充令牌的时间点和当前时间点,并计算所述当前时间点与所述补充令牌的时间点之间的时间间隔Δt;
将所述时间间隔与预设间隔阈值T进行比较,得到比较结果;
按照所述比较结果对应的预设填充方式,计算可补充令牌数量M;
若MA,则计算A与M的差值N,并从所述写入请求中选取N个请求作为待处理访问请求,并对所述待处理访问请求进行写入处理,其中N为正整数;
在所述待处理访问请求处理完成后,获取处理完成的待处理访问请求的标识信息,将所述处理完成的待处理访问请求的标识信息作为目标标识信息;
对标识信息为所述目标标识信息的写入请求进行移除,得到更新后的写入请求;
根据所述更新后的写入请求进行M次令牌填充,并依次执行所述写入请求。
6.如权利要求5所述的基于多云存储的数据访问方法,其特征在于,所述按照所述比较结果对应的预设填充方式,计算可补充令牌数量M包括:
若比较结果为Δt≥T,则获取当前令牌数量E与预设的令牌上限F,按公式M=F-E计算所述可补充令牌数量M;
若比较结果为Δt<T,则按照如下公式计算所述可补充令牌数量M:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于鸬鹚科技(深圳)有限公司,未经鸬鹚科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111063629.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种汽车信号灯
- 下一篇:数据访问的负载均衡方法、装置、计算机设备及介质
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置