[发明专利]数据处理的方法、管理服务器、设备及存储介质有效
申请号: | 202010312907.7 | 申请日: | 2020-04-20 |
公开(公告)号: | CN111541762B | 公开(公告)日: | 2023-08-01 |
发明(设计)人: | 周林军 | 申请(专利权)人: | 广州酷狗计算机科技有限公司 |
主分类号: | H04L67/10 | 分类号: | H04L67/10;H04L67/1097 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 郭新禹 |
地址: | 510660 广东省广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 管理 服务器 设备 存储 介质 | ||
1.一种数据处理的方法,其特征在于,所述方法应用于管理服务器,所述管理服务器与多个集群的主节点设备连接,每个集群包括至少一个主节点设备,所述方法包括:
获取待存储数据和所述待存储数据的数据标识;
在每个集群中,分别确定用于存储所述待存储数据的主节点设备;
将所述待存储数据的数据标识与所述用于存储所述待存储数据的主节点设备的设备标识对应存储;
向每个集群中用于存储所述待存储数据的主节点设备,发送所述待存储数据和所述待存储数据的数据标识;
接收终端发送的数据处理请求,其中,所述数据处理请求中携带有待处理数据的数据标识;
基于所述数据标识,确定每个集群中存储所述待处理数据的目标主节点设备;
分别向每个集群中的目标主节点设备,发送处理权限获取请求,其中,所述处理权限获取请求中携带有所述数据标识,所述目标主节点设备用于在接收到所述处理权限获取请求后生成权限获取成功通知或者权限获取失败通知;
若所述目标主节点设备出现故障无法接收所述处理权限获取请求,所述管理服务器在通知等待时长内接收不到所述目标主节点设备发送的权限获取成功通知或者权限获取失败通知,将存储的损坏设备的数据加一;
如果接收到的权限获取成功通知的数目超过阈值,则分别向每个集群中的目标主节点设备,发送数据处理通知,其中,所述数据处理通知中携带有所述数据标识;
当检测到第一集群中的第一主节点设备中存储的数据与一半以上其他各个主节点设备中存储的数据不相同时,则判定所述第一集群中第一主节点设备中存在已损坏数据;基于所述数据标识,确定第二集群中存储所述已损坏数据的第二主节点设备;
在所述第二主节点设备中获取所述已损坏数据对应的未损坏数据,将所述第一主节点设备中的所述已损坏数据替换为所述未损坏数据。
2.根据权利要求1所述的方法,其特征在于,所述如果接收到的权限获取成功通知的数目超过阈值,则分别向每个集群中的目标主节点设备,发送数据处理通知,包括:
当接收到的权限获取成功通知的数目超过所述多个集群中的集群数目的一半时,分别向每个集群中的目标主节点设备,发送数据处理通知。
3.根据权利要求1所述的方法,其特征在于,所述在每个集群中,分别确定用于存储所述待存储数据的主节点设备,包括:
在每个集群中,分别通过轮询的方式,确定用于存储所述待存储数据的主节点设备。
4.根据权利要求1所述的方法,其特征在于,所述在每个集群中,分别确定用于存储所述待存储数据的主节点设备,包括:
对于每个集群,在所述集群的各主节点设备中,确定剩余存储空间最多的主节点设备为用于存储所述待存储数据的主节点设备。
5.根据权利要求1所述的方法,其特征在于,所述分别向每个集群中的目标主节点设备,发送数据处理通知之后,所述方法还包括:
如果在预设的反馈等待时长内各目标主节点设备中存在第一主节点设备没有发送权限获取成功通知或权限获取失败通知,则在接收到任一目标主节点设备发送的处理完成通知后,向所述任一目标主节点设备获取所述数据标识对应的处理后的数据;
当接收到所述第一主节点设备发送的恢复工作通知时,向所述第一主节点设备,发送所述处理后的数据,以使所述第一主节点设备将存储的所述数据标识对应的数据更新为所述处理后的数据;或者,当接收到第二主节点设备发送的恢复工作通知且所述第二主节点设备是所述第一主节点设备对应的更新的主节点设备时,向所述第二主节点设备,发送所述处理后的数据,以使所述第二主节点设备将存储的所述数据标识对应的数据更新为所述处理后的数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州酷狗计算机科技有限公司,未经广州酷狗计算机科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010312907.7/1.html,转载请声明来源钻瓜专利网。