[发明专利]本地磁盘数据补偿方法、装置、设备及存储介质

说明书

本申请实施例提供一种本地磁盘数据补偿方法、装置、设备及存储介质，该方法包括当目标微服务启动后，获取目标微服务所挂载的本地磁盘的组合数据容量，以及目标微服务的共享存储中所存储的特征数据容量，进而确定组合数据数量和特征数据数量，若组合数据数量小于特征数据数量，基于组合数据数量和预设特征数据长度确定差异数据偏移位置，并确定差异数据标识、差异特征数据和差异结构化数据，将差异结构化数据和差异特征数据追加至本地磁盘，可以简单方便的确定到差异数据偏移位置，进而得到差异结构化数据，通过将差异结构化数据和差异特征数据追加至本地磁盘，以对本地磁盘进行数据补偿，在同步过程中，提升了数据捞取速度，降低了服务恢复时长。

技术领域

本发明实施例涉及计算机技术领域，特别是涉及一种本地磁盘数据补偿方法、装置、设备及存储介质。

背景技术

当前,为了增强系统的容灾能力，分布式系统越来越被大众所接受，分布式所带来的共享存储也同样越来越被大众所使用，安防领域的特征文件由于单条文件大，存储数据库容量大，查询慢，所以最优的方式还是直接存在硬盘中，但由于分布式共享存储的特性，存储数据冗余备份和数据共享，使数据的读取速度变得相对缓慢。

分布式共享存储作为稳定的分布式共享存储，在集群中的某一节点发生宕机的情况下，相关技术中，进行数据的同步需要把分布式共享存储中的文件全量读取出来并复写到其他集群节点的本地磁盘中，当数据量大的时候，因受限与分布式共享存储的读取速度，同步的时间会非常长。在同步的过程中，无法快速的提供数据捞取服务，导致同步过程中，数据捞取速度慢，服务恢复时间长。

发明内容

鉴于以上所述现有技术的缺点，本发明的目的在于提供一种本地磁盘数据补偿方法、装置、设备及存储介质，用于解决对于同步过程中数据捞取速度慢，服务恢复时间长的技术问题。

针对于上述问题，本发明提供了一种本地磁盘数据补偿方法，所述方法包括：当目标微服务启动后，获取所述目标微服务所挂载的本地磁盘的组合数据容量，以及所述目标微服务的共享存储中所存储的特征数据容量，所述本地磁盘存储有所述目标微服务的特征数据和结构化数据，所述共享存储中存储有所述目标微服务的特征数据；根据所述组合数据容量和预设组合数据长度确定组合数据数量，根据所述特征数据容量和预设特征数据长度确定特征数据数量；若所述组合数据数量小于所述特征数据数量，基于所述组合数据数量和所述预设特征数据长度确定差异数据偏移位置，并确定差异数据标识和差异特征数据；基于所述差异数据标识确定差异结构化数据，将所述差异结构化数据和所述差异特征数据追加至所述本地磁盘，以对所述本地磁盘进行数据补偿。

于本发明一实施例中，基于所述组合数据数量和所述预设特征数据长度确定差异数据偏移位置，并确定差异数据标识和差异特征数据包括：根据所述组合数据数量和所述预设特征数据长度确定组合特征长度；基于所述组合特征长度确定所述共享存储中差异数据的所述差异数据偏移位置；自所述共享存储中所述差异数据偏移位置的特征数据开始消费，将得到特征数据和初始数据标识确定为所述差异特征数据和所述差异数据标识，所述共享存储中还存储有各所述特征数据的初始数据标识。

于本发明一实施例中，基于所述差异数据标识确定差异结构化数据包括：基于所述差异数据标识从预设数据库中查询，得到所述差异结构化数据，所述预设数据库中存储有所述目标微服务的所述结构化数据，以及与所述结构化数据对应的所述特征数据的初始数据标识。

于本发明一实施例中，将所述差异结构化数据和所述差异特征数据追加至所述本地磁盘包括：将所述差异结构化数据和所述差异特征数据进行文件组合，得到待存储文件，所述待存储文件的数据长度为所述预设组合数据长度；将所述待存储文件追加至所述本地磁盘。