[发明专利]基于多云存储的数据访问方法、装置、计算机设备及介质

说明书

本发明公开了一种基于多云存储的数据访问方法、装置、计算机设备及存储介质，包括：在接收到客户端发送的数据访问请求时，通过集群通信的方式，对集群中每个节点进行活性探测，得到节点状态，将节点状态为激活的节点，作为有效节点，采用针对S3协议的调度算法，对访问请求进行调度分配，将访问请求中的写入请求平均分配到每个有效节点，并将访问请求中的读取请求发送到当前进行多云存储对象的站点，采用令牌桶算法对每个有效节点的写入请求进行流量控制，在写入请求的数量超过预设阈值时进行及时预警限制，在将读取请求发送到当前进行多云存储对象站点后，采用服务质量QOS对存储进行控制，采用本发明提高了数据访问的效率。

技术领域

本发明涉及数据处理领域，尤其涉及一种基于多云存储的数据访问方法、装置、计算机设备及介质。

背景技术

随着计算机技术的快速发展，越来越多的企业机构构建了网络服务，在用户进行网络访问时，通过对访问请求的响应，为用户提供需要的服务，在用户的访问请求数量较大时，往往会出现延迟较高的情形，使得用户体验不佳。

目前有通过架设集群服务，通过动态负载的方式进行访问请求的分发，来提高访问效率，但是，这种负载方式较为依赖存储的带宽和其他硬件配置，成本较高并存在瓶颈，对于复杂网络环境，依然存在访问效率低的问题。

发明内容

本发明实施例提供一种基于多云存储的数据访问方法、装置、计算机设备和存储介质，以提高数据访问请求的处理效率。

为了解决上述技术问题，本申请实施例提供一种基于多云存储的数据访问方法，包括：

在接收到客户端发送的数据访问请求时，通过集群通信的方式，对集群中每个节点进行活性探测，得到节点状态；

将所述节点状态为激活的节点，作为有效节点；

采用针对S3协议的调度算法，对所述访问请求进行调度分配，将所述访问请求中的写入请求平均分配到每个所述有效节点，并将所述访问请求中的读取请求发送到当前进行多云存储对象的站点；

采用令牌桶算法对每个所述有效节点的写入请求进行流量控制，在所述写入请求的数量超过预设阈值时进行及时预警限制；

在将读取请求发送到当前进行多云存储对象站点后，采用服务质量QOS对存储进行控制。

可选地，所述通过集群通信的方式，对集群中每个节点进行活性探测，得到节点状态包括：

基于集群通信，向每个所述节点发送心跳包检测指令；

根据每个所述节点针对所述心跳包检测指令的反馈结果，确定每个所述节点对应的节点状态。

可选地，所述多云存储网关部署有ECS多数据中心，所述采用针对S3协议的调度算法，对所述访问请求进行调度分配，将所述访问请求中的写入请求平均分配到每个所述有效节点包括：

对所述每个有效节点的主机地址进行解析，得到每个有效节点的主机地址格式，其中，所述主机地址格式包括路径格式和虚拟主机格式；

基于所述主机地址格式，生成ECS多数据中心的全局负载均衡策略；

基于所述全局负载均衡策略，对所述访问请求进行调度分配，将所述访问请求中的写入请求平均分配到每个所述有效节点。

可选地，所述将所述访问请求中的读取请求发送到当前进行多云存储对象的站点包括：

对所述客户端的IP地址进行监测；

若所述客户端的IP地址为IPv6类型，对所述客户端地址进行转换，得到IPv4类型的IP地址；

基于所述IPv4类型的IP地址，对所述问请求中的读取请求进行存储处理。