[发明专利]索引数据同步方法、系统及装置在审
申请号: | 202010605957.4 | 申请日: | 2020-06-29 |
公开(公告)号: | CN113297201A | 公开(公告)日: | 2021-08-24 |
发明(设计)人: | 林炳辰 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/23;G06F16/27 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 李晓庆 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 索引 数据 同步 方法 系统 装置 | ||
本申请提供索引数据同步方法、系统及装置,其中所述索引数据同步方法包括:获取目标分区节点提交的待同步索引数据;将所述待同步索引数据写入所述目标分区节点对应的键值数据库;根据写入结果将临时版本号的值变更为状态版本号的值;其中,所述临时版本号的值表示目标分区节点对应的同步事务的事务状态,所述状态版本号的值表示目标分区节点提交索引数据的同步进度;通过所述目标分区节点对应的目标同步事务的事务数值,对所述临时版本号的值的变更行为进行记录;在检测到记录后的事务数值满足预设同步条件的情况下,将所述键值数据库中的待同步索引数据同步至对象存储节点。
技术领域
本申请涉及数据处理技术领域,特别涉及索引数据同步方法、系统及装置。
背景技术
随着互联网技术的发展,数据库在各种场景都得以应用,而索引是数据库中非常重要的一类数据,它负责快速定位查询需要的数据;通常分布式数据库会把索引存储到本地计算机上,为了保证可用性,往往会配置多个灾备节点,并且使用分布式一致性协议来保证索引的正确性,多节点和一致性协议会显著增加系统的开发和维护成本,并且分布式数据库的多个分区节点会频繁添加索引数据,使用全局索引方案会引起争抢互斥锁的问题,或者使用分区索引方案会存在并发性下降的问题,故亟需一种有效的方案以解决上述问题。
发明内容
有鉴于此,本申请实施例提供了一种索引数据同步方法。本申请同时涉及一种索引数据同步系统,一种索引数据同步装置,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中存在的技术缺陷。
根据本申请实施例的第一方面,提供了一种索引数据同步方法,包括:
获取目标分区节点提交的待同步索引数据;
将所述待同步索引数据写入所述目标分区节点对应的键值数据库;
根据写入结果将临时版本号的值变更为状态版本号的值;其中,所述临时版本号的值表示目标分区节点对应的同步事务的事务状态,所述状态版本号的值表示目标分区节点提交索引数据的同步进度;
通过所述目标分区节点对应的目标同步事务的事务数值,对所述临时版本号的值的变更行为进行记录;
在检测到记录后的事务数值满足预设同步条件的情况下,将所述键值数据库中的待同步索引数据同步至对象存储节点。
可选的,所述将所述待同步索引数据写入所述目标分区节点对应的键值数据库,包括:
获取所述目标分区节点的节点标识;
根据所述节点标识确定所述目标分区节点在所述键值数据库中的目标键值存储区;
将所述待同步索引数据写入所述目标键值存储区。
可选的,所述将所述待同步索引数据写入所述目标键值存储区,包括:
确定提交所述待同步索引数据的时间信息;
基于所述时间信息生成所述待同步索引数据的键名,以及确定所述待同步索引数据的键值和数据类型;
按照所述键名、所述键值和所述数据类型组成所述待同步索引数据的键值项数据,并写入所述目标键值存储区。
可选的,还包括:
确定将所述待同步索引数据写入所述键值数据库的写入时间;
将所述写入时间记录至所述键值数据库的元数据表;
相应的,所述在检测到记录后的事务数值满足预设同步条件的情况下,将所述键值数据库中的待同步索引数据同步至对象存储节点,包括:
在检测到记录后的事务数值满足预设同步条件的情况下,读取所述键值数据库的所述元数据表,获得所述写入时间;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010605957.4/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置