[发明专利]数据分发方法和装置、存储介质及电子装置

权利要求书

1.一种数据分发方法，其特征在于，包括：

通过目标流处理系统从订阅系统获取目标数据，其中，所述订阅系统用于保存所述目标数据；

确定所述目标流处理系统的多个输出分支，其中，所述多个输出分支中的每个输出分支对应一个数据处理系统；

通过所述多个输出分支将所述目标数据发送至所述多个输出分支对应的多个数据处理系统，其中，所述多个数据处理系统中的每个数据处理系统与所述多个输出分支中的一个输出分支一一对应。

2.根据权利要求1所述的方法，其特征在于，所述目标流处理系统包括：Flink流处理系统，其中，所述确定所述目标流处理系统的多个输出分支，包括：

确定所述Flink流处理系统中存储的目标数量，其中，所述目标数量用于表示所述Flink流处理系统的输出分支的总数；

确定所述目标数量的输出分支中的每个输出分支对应的路径标识，其中，所述路径标识用于标识所述每个输出分支对应的数据处理系统与所述目标流处理系统之间的传输路径。

3.根据权利要求2所述的方法，其特征在于，所述通过所述多个输出分支将所述目标数据发送至所述多个输出分支对应的多个数据处理系统，包括：

通过所述Flink流处理系统对所述目标数据进行预处理，得到预处理后的数据；

通过所述Flink流处理系统将所述预处理后的数据复制为所述目标数量份；

通过所述Flink流处理系统将所述目标数量份中的每份预处理后的数据根据一个输出分支对应的路径标识发送至对应的一个数据处理系统。

4.根据权利要求1所述的方法，其特征在于，在所述通过目标流处理系统从订阅系统获取目标数据之后，所述方法还包括：

通过所述目标流处理系统中的记录模块保存目标偏移量，其中，所述目标偏移量用于指示所述目标数据在所述订阅系统中对应的偏移量。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

在所述目标流处理系统发生故障后，在对所述目标流处理系统进行恢复的情况下，通过所述目标流处理系统根据所述目标偏移量从所述订阅系统获取数据。

6.根据权利要求1所述的方法，其特征在于，在所述通过所述多个输出分支将所述目标数据发送至所述多个输出分支对应的多个数据处理系统之前，所述方法还包括：

确定所述多个数据处理系统中的每个数据处理系统对应的数据格式；

根据所述每个数据处理系统对应的数据格式，对所述目标数据进行格式转换，得到转换后的数据，共得到所述多个数据处理系统对应的多个转换后的数据；其中，所述通过所述多个输出分支将所述目标数据发送至所述多个输出分支对应的多个数据处理系统，包括：

通过所述多个输出分支，将所述多个转换后的数据发送至对应的一个数据处理系统。

7.一种数据分发装置，其特征在于，包括：

获取模块，用于通过目标流处理系统从订阅系统获取目标数据，其中，所述订阅系统用于保存所述目标数据；

第一确定模块，用于确定所述目标流处理系统的多个输出分支，其中，所述多个输出分支中的每个输出分支对应一个数据处理系统；

发送模块，用于通过所述多个输出分支将所述目标数据发送至所述多个输出分支对应的多个数据处理系统，其中，所述多个数据处理系统中的每个数据处理系统与所述多个输出分支中的一个输出分支一一对应。

8.根据权利要求7所述的装置，其特征在于，所述目标流处理系统包括Flink流处理系统，其中，所述第一确定模块包括第一确定单元和第二确定单元，其中，

所述第一确定单元，用于确定所述Flink流处理系统中存储的目标数量，其中，所述目标数量用于表示所述Flink流处理系统的输出分支的总数；

所述第二确定单元，用于确定所述目标数量的输出分支中的每个输出分支对应的路径标识，其中，所述路径标识用于标识所述每个输出分支对应的数据处理系统与所述目标流处理系统之间的传输路径。