[发明专利]一种实现数据负载均衡的方法、系统及电子设备

说明书

本发明涉及一种实现数据负载均衡的方法、系统及电子设备，通过提取各消息中相应的关键信息和内容，然后将各关键信息插入分布式消息队列中，将各关键信息与各相应的内容插入至分布式内存数据库(DMDB)，实现了各处理进程间的数据负载均衡，最后通过读取分布式消息队列中各关键信息，相应地从分布式内存数据库中读取各相应的内容进行处理，即通过结合分布式消息队列(KAFKA)和分布式内存数据库(DMDB)，保证各进程之间数据负载均衡，进而保证处理单元具有高性能的处理能力。

技术领域

本发明涉及通信领域，尤其涉及一种实现数据负载均衡的方法、系统及电子设备。

背景技术

随着电信支撑系统的云化，电信支撑系统的处理能力趋于集群化，其中，每个处理单元由具备相同能力的处理进程完成，通过大并发达到高速数据处理的目的，目前，各个处理进程之间通过分布式消息队列(KAFKA)中的生产者-消费者的队列协同来进行数据负载，在数据安全级别较低时，分布式消息队列(KAFKA)的数据负载的性能较好，但是在安全级别较高或进行高速数据处理时，分布式消息队列容易出现队列不协同以使数据负载不均衡，从而导致处理单元的处理能力发生异常。

因此如何实现各个处理进程之间数据负载均衡是亟待解决的技术问题。

发明内容

本发明所要解决的技术问题是针对现有技术的不足，提供了一种实现数据负载均衡的方法、系统及电子设备。

本发明的一种实现数据负载均衡的方法的技术方案如下：

S1、接收多个消息，并提取每个消息中的关键信息和内容；

S2、将各所述关键信息按照时间顺序插入分布式消息队列中，并将各所述关键信息和与每个关键信息相应的内容插入至分布式内存数据库；

S3、读取所述分布式消息队列中多个第一关键信息，根据各所述第一关键信息从所述分布式内存数据库中读取到相一致的各第二关键信息，然后读取所述相一致的第二关键信息的相应的内容。

本发明的一种实现数据负载均衡的方法的有益效果如下：

通过提取各消息中相应的关键信息和内容，然后将各关键信息插入分布式消息队列中，将各关键信息与各相应的内容插入至分布式内存数据库(DMDB)，实现了各处理进程间的数据负载均衡，最后通过读取分布式消息队列中各关键信息，相应地从分布式内存数据库中读取各相应的内容进行处理，即通过结合分布式消息队列(KAFKA)和分布式内存数据库(DMDB)，保证各进程之间数据负载均衡，进而保证处理单元具有高性能的处理能力。

在上述方案的基础上，本发明的一种实现数据负载均衡的方法还可以做如下改进。

进一步，还包括如下步骤：

S10、每间隔预设时间段在所述分布式内存数据库设置第一表和第二表，按照时间顺序将所述提取的各所述关键信息与各相应的内容插入至所第一表内；

S11、根据各所述第一关键信息从所述第一表中读取到相一致的各第二关键信息，然后读取各相应的内容，并将所述相一致的第二关键信息插入所述第二表内；

S12、每间隔所述预设时间段判断所述第一表与所述第二表中的关键信息是否相同；若否，则对所述第一表中存在且尚未在所述第二表中读取到的关键信息重新进行处理；若是，删除所述第一表和所述第二表。

采用上述进一步方案的有益效果是：通过校验第一表和第二表是否一致，能准确地判断出在高速数据处理时即对消息进行高速处理时是否发生异常，并作出相应的处理。

进一步，采用trunck方式删除所述第一表和所述第二表。

采用上述进一步方案的有益效果是：分布式内存数据库(DMDB)的删除(DELETE)性能较低，通过trunck方式来删除第一表和第二表，进一步提高了处理单元的处理能力。