[发明专利]数据准实时分发方法、装置、设备及存储介质

权利要求书

1.一种数据准实时分发方法，其特征在于，所述方法包括：

通过后端系统，获取目标应用发送的数据推送请求，所述数据推送请求携带有待落库的数据；

通过所述后端系统，响应所述数据推送请求，将所述待落库的数据存储到目标数据库，生成落库成功信号；

通过所述后端系统的异步线程管理模块，根据所述落库成功信号生成异步线程，得到目标异步线程；

通过所述目标异步线程，根据所述目标数据库中的所述待落库的数据分别进行标签生成和数据包封装，得到待推送的标签和待推送的数据包；

通过所述目标异步线程，将所述待推送的标签和所述待推送的数据包作为关联数据推送给目标Kafka；

通过消费服务系统，获取目标数据分发配置数据，根据所述目标Kafka中的所述待推送的标签和所述目标数据分发配置数据，对所述目标Kafka中的所述待推送的数据包进行分发；

所述根据所述目标数据库中的所述待落库的数据分别进行标签生成和数据包封装，得到待推送的标签和待推送的数据包的步骤，包括：

根据所述目标数据库中的所述待落库的数据获取目标标签生成规则；

采用所述目标标签生成规则的目标字段名称集合，根据所述目标数据库中的所述待落库的数据进行标签拼接，得到所述待推送的标签；

根据所述目标数据库中的所述待落库的数据获取目标数据包封装规则；

根据所述目标数据包封装规则，根据所述目标数据库中的所述待落库的数据进行数据包封装，得到所述待推送的数据包。

2.根据权利要求1所述的数据准实时分发方法，其特征在于，所述采用所述目标标签生成规则的目标字段名称集合，根据所述目标数据库中的所述待落库的数据进行标签拼接，得到所述待推送的标签的步骤，包括：

根据所述目标字段名称集合，从所述目标数据库中的所述待落库的数据中获取标签值数据，得到待拼接的数据集合；

采用所述目标标签生成规则的拼接顺序规则，根据所述待拼接的数据集合进行标签拼接，得到所述待推送的标签。

3.根据权利要求1所述的数据准实时分发方法，其特征在于，所述根据所述目标数据包封装规则，根据所述目标数据库中的所述待落库的数据进行数据包封装，得到所述待推送的数据包的步骤，包括：

根据所述目标数据包封装规则的字段名称集合，从所述目标数据库中的所述待落库的数据中获取需要分发的数据，得到待封装的数据集合；

根据所述目标数据包封装规则的数据封装规则，对所述待封装的数据集合进行数据包封装，得到所述待推送的数据包。

4.根据权利要求1所述的数据准实时分发方法，其特征在于，所述根据所述目标Kafka中的所述待推送的标签和所述目标数据分发配置数据，对所述目标Kafka中的所述待推送的数据包进行分发的步骤，包括：

分别采用所述目标数据分发配置数据的每个标签匹配规则，对所述目标Kafka中的所述待推送的标签进行正则匹配，得的各个所述标签匹配规则各自对应的标签匹配结果；

当存在所述标签匹配结果为成功时，将所述标签匹配结果为成功的所述标签匹配规则在所述目标数据分发配置数据中对应的数据包分发规则作为目标数据包分发规则；

采用所述目标数据包分发规则，对所述目标Kafka中的所述待推送的数据包进行分发。

5.根据权利要求4所述的数据准实时分发方法，其特征在于，所述获取目标数据分发配置数据的步骤之前，还包括：

通过所述消费服务系统的消费管理模块，获取配置请求；

通过所述消费管理模块，响应所述配置请求，获取待处理的数据分发配置数据；

通过所述消费管理模块，将所述待处理的数据分发配置数据存储在所述消费服务系统对应的数据库中。