[发明专利]一种数据发布系统、方法、装置、电子设备及存储介质

权利要求书

1.一种数据发布系统，包括：

驱动控制模块，用于获得数据发布任务，基于发布任务中的目标业务应用，确定运行各个目标业务应用的容器所在容器集群中的目标主控服务模块；并将所述发布任务发送至各个目标主控服务模块；

所述目标主控服务模块，用于接收所述数据发布任务，将数据发布任务中包含的：目标数据的发布版本信息和发布目标地址信息发送至各个设置在容器中的代理服务模块；其中，所述目标数据包括全量数据或增量数据；

所述代理服务模块，用于基于所述发布版本信息和发布目标地址信息，下载新版本数据存储至其所在的容器中；

发布任务构建模块，用于根据所述目标数据是否为分片数据，确定目标数据发布模式为组合模式或组合分片模式；基于目标数据发布模式，从预设的多个发布模板中确定与目标发布模式对应的目标模板；基于目标模板及目标业务应用，构建数据发布任务。

2.根据权利要求1所述的系统，

发布任务构建模块，具体用于对数据源进行监测，在监测到数据源产生了全量或增量新版本数据的情况下，将全量或增量新版本数据作为目标数据，基于目标数据对应的发布版本信息和目标业务应用，构建数据发布任务；将所述数据发布任务发送至所述驱动控制模块。

3.根据权利要求1所述的系统，所述系统还包括：数据中心；

所述数据中心，用于存储预设的多个发布模板；

所述发布任务构建模块，从所述数据中心获得预设的多个发布模板。

4.根据权利要求2所述的系统，其中，

所述发布任务构建模块，具体用于当目标数据为新版本增量数据的情况下，基于已发布的各个增量数据的版本信息和全量数据的版本信息之间的依赖关系，对新版本增量数据进行判断；若该新版本增量数据的版本为已发布的版本或比已发布的版本低，则将该新版本增量数据丢弃，若该新版本增量数据的版本不为已发布的版本或比已发布的版本高，则将该新版本增量数据的发布版本信息及发布目标地址添加到数据发布任务中。

5.根据权利要求4所述的系统，其中，

所述全量数据的版本信息包含：该全量数据的版本标识；增量数据的版本信息包括：该增量数据所依赖的全量数据的版本标识和该增量数据的版本标识；

所述发布任务构建模块，基于增量数据版本信息中该增量数据所依赖的全量数据的版本标识和该增量数据的版本标识，对新版本增量数据进行判断。

6.根据权利要求1所述的系统，其中，

所述数据发布任务中，还包括：需要执行的发布阶段信息；所述发布阶段信息包括：多个发布阶段及各个发布阶段的执行顺序；

所述驱动控制模块，按照所述发布阶段的执行顺序，针对当前发布阶段，从执行所述目标业务应用的容器集群中确定出该发布阶段对应的目标容器集群；将该目标容器集群中的主控服务模块，确定为目标主控服务模块。

7.根据权利要求1所述的系统，其中，

所述主控服务模块，还用于基于所述数据发布任务、所述代理服务模块上报的当前版本信息及数据状态信息，和已存储的数据版本信息，确定目标版本信息；并基于目标版本信息，生成针对目标数据的数据状态驱动信息发送至所述代理服务模块；

所述代理服务模块，具体用于基于所述发布版本信息和发布目标地址信息，按照所述数据状态驱动信息中的各个执行步骤及执行顺序，下载所述目标数据存储至其所在的容器中。

8.根据权利要求7所述的系统，其中，

每个所述容器集群中，还包括：供主控服务模块监听使用的监听数据库和供主控服务模块查询使用的查询数据库；

所述监听数据库，用于存储主控服务模块所有要监听的容器实例组名称；

所述主控服务模块接收的各个容器的当前数据状态信息为：所述监听数据库中每个容器实例组名称对应的容器的当前数据状态信息；

所述查询数据库，用于存储各个容器中各个数据的最高版本信息；

所述主控服务模块，基于各个容器的当前数据状态信息和查询数据库中各个数据的最高版本信息进行逻辑对比的结果，确定目标版本信息。