[发明专利]一种内外网数据传输的方法、装置、介质和电子设备

权利要求书

1.一种内外网数据传输的方法，其特征在于，其包括：

在消息队列中建立多个分区；

获取来自第一监听服务器主动推送的多个消息；

将所述多个消息按照处理速度分配到所述多个分区中；

通过响应来自第二监听服务器的拉取指令，将所述多个分区中的消息发送给所述第二监听服务器；

所述第一监听服务器和所述第二监听服务器分别设置在外网和内网、或分别设置在内网和外网中。

2.如权利要求1所述的内外网数据传输的方法，其特征在于，所述在消息队列中建立多个分区包括：

根据业务场景、日志列表中日志的数目、消费端消费者的数目进行划分，得到多个分区。

3.如权利要求2所述的内外网数据传输的方法，其特征在于，划分时采用RocketMQ、Kafka或Pulsar。

4.如权利要求1所述的内外网数据传输的方法，其特征在于，所述多个消息是所述第一监听服务器一次性推送的，且所述第一监听服务器相隔预设时间进行推送。

5.如权利要求1所述的内外网数据传输的方法，其特征在于，所述将所述多个消息按照处理速度分配到所述多个分区之前，还包括：

消息一旦进入消息队列产生相应的监测信号；

根据预设时间段内监测信号的数量计算得到处理速度。

6.如权利要求1所述的内外网数据传输的方法，其特征在于，将所述多个消息按照处理速度分配到所述多个分区包括：

获取所述多个分区的当前可用存储空间的大小；

根据所述当前可用存储空间的大小对所述多个消息进行均衡分配，使得所述不同分区中的消息的数量差值在预设范围内。

7.如权利要求1所述的内外网数据传输的方法，其特征在于，通过响应来自第二监听服务器的拉取指令，将所述多个分区中的消息发送给所述第二监听服务器包括：

检测所述第二监听服务端定时的刷新结果，如果刷新结果为空闲，则与broker建立连接，并通过连接获取拉取指令；

根据所述拉取指令对应的第二监听服务器的语义信息匹配对应的分区；

将匹配到的分区中的消息发送给所述第二监听服务器。

8.一种内外网数据传输的装置，其特征在于，包括：

分区模块，配置为在消息队列中建立多个分区；

推送模块，配置为获取来自第一监听服务器主动推送的多个消息；

分配模块，配置为将所述多个消息按照处理速度分配到所述多个分区中；

拉取模块，配置为通过响应来自第二监听服务器的拉取指令，将所述多个分区中的消息发送给所述第二监听服务器；

所述第一监听服务器和所述第二监听服务器分别设置在外网和内网、或分别设置在内网和外网中。

9.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1至7中任一项所述的内外网数据传输的方法的步骤。

10.一种电子设备，其特征在于，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如权利要求1至7中任一项所述的内外网数据传输的方法。