[发明专利]云存储的元数据管理方法、装置、电子设备及存储介质在审
申请号: | 202011411944.X | 申请日: | 2020-12-03 |
公开(公告)号: | CN112417053A | 公开(公告)日: | 2021-02-26 |
发明(设计)人: | 张代谦;杨骥 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/22 |
代理公司: | 深圳市隆天联鼎知识产权代理有限公司 44232 | 代理人: | 叶虹 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储 数据管理 方法 装置 电子设备 介质 | ||
1.一种云存储的元数据管理方法,其特征在于,所述方法包括:
监测数据库中资源数据的数据变更;
生成用于描述所述数据变更的操作序列;
将所述操作序列同步至各节点,并触发各节点的状态机分别按照各自的状态机结构执行所述操作序列,以使得各节点分别按照各自的索引结构独立存储用于描述所述资源数据的增量元数据。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
通过预设的一致性协议触发各节点通过投票选举出一个主节点,除所述主节点外的节点为从节点;
通过所述主节点生成所述操作序列并将所述操作序列同步至所述从节点。
3.根据权利要求1所述的方法,其特征在于,将所述操作序列同步至各节点,包括:
监测各节点的状态机分别对所述操作序列的执行进度;
基于所述执行进度将所述操作序列同步至各节点处。
4.根据权利要求3所述的方法,其特征在于,基于所述执行进度将所述操作序列同步至各节点,包括:
将所述操作序列顺序划分为等长的各子操作序列;
每次同步将同一子操作序列发送至各节点,并响应于所述执行进度均完成本次同步的子操作序列,将下一子操作序列发送至各节点以进行下一次同步。
5.根据权利要求3所述的方法,其特征在于,基于所述执行进度将所述操作序列同步至各节点,包括:
监测所述执行进度之间的最大进度差;
持续地将所述操作序列同步发送至各节点,并响应于所述最大进度差调整单位时间内所发送的操作序列的信息量,其中,所述信息量与所述最大进度差呈反相关。
6.根据权利要求1所述的方法,其特征在于,所述操作序列由多个操作记录依序组成,所述方法还包括:
监测各节点各自的次序序列,所述次序序列用于描述对应节点的状态机依次所执行的操作记录的次序;
响应于检测到目标节点的次序序列与所述操作序列相比存在中断,将所述中断处的操作记录发送至所述目标节点,并触发所述目标节点的状态机按照其状态机结构执行所述中断处的操作记录。
7.根据权利要求1所述的方法,其特征在于,各自的索引结构包括:用于描述数据分片列表所在磁盘的索引结构,或者,用于描述数据分片所在磁盘的索引结构。
8.一种云存储的元数据管理装置,其特征在于,所述装置包括:
监测模块,配置为监测数据库中资源数据的数据变更;
生成模块,配置为生成用于描述所述数据变更的操作序列;
同步模块,配置为将所述操作序列同步至各节点,并触发各节点的状态机分别按照各自的状态机结构执行所述操作序列,以使得各节点分别按照各自的索引结构独立存储用于描述所述资源数据的增量元数据。
9.一种云存储的元数据管理电子设备,其特征在于,包括:
存储器,存储有计算机可读指令;
处理器,读取存储器存储的计算机可读指令,以执行权利要求1-7中的任一个所述的方法。
10.一种计算机可读存储介质,其特征在于,其上存储有计算机可读指令,当所述计算机可读指令被计算机的处理器执行时,使计算机执行权利要求1-7中的任一个所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011411944.X/1.html,转载请声明来源钻瓜专利网。