[发明专利]元数据同步方法、装置、电子设备及存储介质

说明书

本发明实施例公开了一种元数据同步方法、装置、电子设备及存储介质，其中该方法包括：在执行目标DDL命令时，基于计算节点的元数据表确定是否已执行DDL操作日志中的所有现存DDL命令；若否，等待DDL重放进程执行最新DDL命令，并相应更新了所述元数据表后，锁定所述DDL操作日志；追加所述目标DDL命令的信息到所述DDL操作日志，执行所述目标DDL命令，可以实现基于全局操作日志的分布式数据库元数据同步，确保集群的每一个计算节点都执行完全相同的DDL操作序列，从而在每个计算节点中生成完全相同的元数据。

技术领域

本发明涉及分布式数据库管理系统技术领域，尤其涉及一种元数据同步方法、装置、电子设备及存储介质。

背景技术

分布式数据库管理系统(Distributed DataBase Management System,DDBMS)通常包括计算节点，存储节点和元数据节点这三类组件。元数据节点负责存储集群的元数据，包括集群拓扑结构，以及集群管理的用户数据的元数据，例如用户表定义语句等。计算节点主要负责以下工作：接受客户端连接请求，验证请求，建立连接状态；处理客户端连接发送过来的查询请求，并且返回结果给客户端；与存储节点交互完成数据读写；实现分布式事务协调器(DistributedTransactionCoordinator,DTC)，完成分布式事务的可靠提交。

DDBMS的每一个计算节点都可以执行DDL和DML语句，因此需要确保集群的每一个计算节点都执行完全相同的DDL操作序列，从而在每个计算节点中生成完全相同的元数据。

发明内容

本发明的主要目的在于提供一种元数据同步方法、装置、电子设备及存储介质，可以解决分布式数据库中计算节点元数据同步问题。

为实现上述目的，本申请第一方面提供一种元数据同步方法，所述方法包括：

在执行目标DDL命令时，基于计算节点的元数据表确定是否已执行DDL操作日志中的所有现存DDL命令；

若否，等待DDL重放进程执行最新DDL命令，并相应更新了所述元数据表后，锁定所述DDL操作日志；

追加所述目标DDL命令的信息到所述DDL操作日志，执行所述目标DDL命令。

可选地，所述基于元数据表确定是否已执行DDL操作日志中的所有现存DDL命令，包括：

对比所述元数据表中的复制标识和所述DDL操作日志的最大标识，所述复制标识用于标记所述计算节点在所述DDL操作日志中的复制位置；

若所述复制标识和所述DDL操作日志的最大标识相同，则确定已执行所述DDL操作日志中的所有现存DDL命令；

若所述复制标识和所述DDL操作日志的最大标识不相同，则确定未执行所述DDL操作日志中的所有现存DDL命令。

可选地，所述DDL重放进程，包括：

从所述DDL操作日志中拉取自所述元数据表中的复制标识开始的所有该计算节点未执行过的DDL命令；

执行所述未执行过的DDL命令；

所述元数据表的更新包括：根据已执行的DDL命令更新所述元数据表中的复制标识。

可选地，所述DDL操作日志中记载的DDL命令包括发起执行所述DDL命令的计算节点标识；

所述从所述DDL操作日志中拉取自所述元数据表中的复制标识开始的所有该计算节点未执行过的DDL命令，包括：

根据所述计算节点标识，从所述DDL操作日志中拉取自所述元数据表中的复制标识开始的所有该计算节点未执行过的DDL命令。

可选地，所述方法还包括：