[发明专利]数据库同步方法、装置、终端设备以及存储介质

说明书

本申请实施例公开了一种数据库同步方法、装置、终端设备以及存储介质，该方法包括：检索主节点接收检索从节点发送的数据同步请求，数据同步请求中包括检索服务标识和同步数据标识；当检索主节点确定检索服务标识与检索主节点当前运行的检索服务的服务标识相同，且同步数据标识包含于同步缓存队列时，发起检索主节点的主检索数据库和检索从节点的从检索数据库的部分同步；其中，同步缓存队列中存储多个写类请求，一个写类请求对应一个同步数据标识，任一同步数据标识用于标识执行任一同步数据标识对应的写类请求之后写入主检索数据库的总数据量。采用本申请实施例，可提高主从检索数据库的数据备份速度，降低机器资源占用。

技术领域

本申请涉及数据处理领域，尤其涉及一种数据库同步方法、装置、终端设备以及存储介质。

背景技术

当前，为了保证检索效率，通常会将检索服务部署在中央处理器（centralprocessing unit,CPU）、图像处理器（graphics processing unit，GPU）和视频处理单元（video processing unit ，VPU）等计算资源更为丰富的一台机器上，然而，当存在高并发的检索请求时将给检索服务所在机器带来很大压力。一旦该检索服务出现问题或所在机器出现故障将直接导致检索系统不可用。对于客流、提醒等实时性检索场景将是灾难性的结果，即使是身份建档等非实时检索场景，如果检索服务不能快速恢复，也会直接导致建档失败。为此，本领域技术人员提出了可将检索服务分发到检索从节点的方案，以实现检索的读写分离，大大降低检索主节点处理请求的压力。其中，为实现上述方案，保证检索从节点与检索主节点间的数据同步是基本前提之一，因此，如何提高主从检索数据库的数据备份速度，降低机器资源占用成为当前亟待解决的问题之一。

发明内容

本申请实施例提供一种数据库同步方法、装置、终端设备以及存储介质，可提高主从检索数据库的数据备份速度，降低机器资源占用。

第一方面，本申请实施例提供了一种数据库同步方法，该方法包括：

检索主节点接收检索从节点发送的数据同步请求，上述数据同步请求中包括检索服务标识和同步数据标识；

当上述检索主节点确定上述检索服务标识与上述检索主节点当前运行的检索服务的服务标识相同，且上述同步数据标识包含于同步缓存队列时，发起上述检索主节点的主检索数据库和上述检索从节点的从检索数据库的部分同步；

其中，上述同步缓存队列中存储多个写类请求，一个写类请求对应一个同步数据标识，任一同步数据标识用于标识执行上述任一同步数据标识对应的写类请求之后写入主检索数据库的总数据量。

结合第一方面，在一种可能的实施方式中，上述发起上述检索主节点的主检索数据库和上述检索从节点的从检索数据库的部分同步，包括：

从上述同步缓存队列中确定出在上述同步数据标识对应的写类请求之后存入的所有写类请求，并向上述检索从节点发送上述所有写类请求，以触发上述检索从节点执行上述所有写类请求以更新上述从检索数据库中存储的数据以及上述检索从节点中的同步数据标识。

结合第一方面，在一种可能的实施方式中，上述方法还包括：

当上述检索主节点确定上述检索服务标识与上述检索主节点当前运行的检索服务的服务标识不相同时，发起上述主检索数据库和上述从检索数据库的完全同步；或者

当上述检索主节点确定上述同步数据标识不包含于同步缓存队列时，发起上述主检索数据库和上述从检索数据库的完全同步。

结合第一方面，在一种可能的实施方式中，上述发起上述主检索数据库和上述从检索数据库的完全同步，包括：

上述检索主节点向上述检索从节点发送二进制日志，以触发上述检索从节点通过反序列化上述二进制日志以获取上述二进制日志中记录的写类请求，并通过执行上述写类请求以更新上述从检索数据库中存储的数据和上述同步数据标识。