[发明专利]消息处理方法、装置、电子设备及存储介质

说明书

本发明的实施例提供了一种消息处理方法、装置、电子设备及存储介质，涉及计算机技术领域。该方法包括：接收消息生产端发送的目标消息；基于目标消息的类型将目标消息发送至第一消息处理系统或第二消息处理系统；通过第一消息系统或第二消息处理系统对目标消息进行处理以确定与目标消息对应的消息消费者；以及将经处理的目标消息发送至对应的消息消费者，目标消息的类型为日志型消息或事务型消息。本发明实施例的技术方案既能够大批量处理日志型数据还能够支持事务处理，进而能够提高消息处理的吞吐量。

技术领域

本发明涉及计算机技术领域，具体而言，涉及一种消息处理方法、消息处理装置、电子设备以及计算机可读存储介质。

背景技术

随着互联网技术的发展，出现了各种消息处理系统，消息处理系统可以利用高效可靠的消息传递机制进行平台无关的数据通信。

目前，RocketMQ消息处理系统与Kafka消息处理系统是常用的两种消息处理系统，然而，RocketMQ消息处理系统适用于处理事务型消息，但是一般不适用于大批量处理日志型数据的业务场景；Kafka消息处理系统适用于处理日志型数据，但是不支持事务型消息的处理。

因此，需要提供一种能够解决上述问题中的一种或多种问题的一种消息处理方法、消息处理装置、电子设备以及计算机可读存储介质。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本发明背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本发明实施例的目的在于提供一种消息处理方法、消息处理装置、电子设备以及计算机可读存储介质，进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的一个或者多个问题。

根据本发明实施例的第一方面，提供了一种消息处理方法，包括：接收消息生产端发送的目标消息；基于所述目标消息的类型将所述目标消息发送至第一消息处理系统或第二消息处理系统；通过所述第一消息系统或所述第二消息处理系统对所述目标消息进行处理以确定与所述目标消息对应的消息消费者；以及将经处理的所述目标消息发送至所述对应的消息消费者，所述目标消息的类型为日志型消息或事务型消息。

在本发明的一些实施例中，基于前述方案，基于所述目标消息的类型将所述目标消息发送至第一消息处理系统或第二消息处理系统，包括：获取所述目标消息的标签，并基于所述标签判断所述目标消息的类型；在判定所述目标消息为事务型消息时，将所述目标消息发送至第一消息处理系统；在判定所述目标消息为日志型消息时，将所述目标消息发送至第二消息处理系统。

在本发明的一些实施例中，基于前述方案，在判定所述目标消息为事务型消息时，将所述目标消息发送至第一消息处理系统，包括：在判定所述目标消息为事务型消息时，将所述目标消息发送至事务消息队列中；将所述事务消息队列中的目标消息批量地发送至所述第一消息处理系统。

在本发明的一些实施例中，基于前述方案，将所述事务消息队列中的目标消息批量地发送至所述第一消息处理系统，包括：以预定时间间隔定时地将所述事务消息队列中的目标消息批量地发送至所述第一消息处理系统；或者在所述事务消息队列中的目标消息的数量达到预定阈值时，将所述目标消息批量地发送至所述第一消息处理系统；或者确定事务消息队列中的目标消息的优先级，将优先级大于预定级别的目标消息批量地发送至第一消息处理系统。

在本发明的一些实施例中，基于前述方案，所述消息处理方法还包括：在所述第一消息处理系统或所述第二消息处理系统接收到与所述目标消息消对应的消息消费失败的信息之后，重新发送所述目标消息。

在本发明的一些实施例中，基于前述方案，所述第一消息处理系统为RocketMQ系统，所述第二消息处理系统为Kafka系统。