[发明专利]消息处理方法、装置、电子设备及可读存储介质有效
申请号: | 202010246268.9 | 申请日: | 2020-03-31 |
公开(公告)号: | CN111585867B | 公开(公告)日: | 2022-04-19 |
发明(设计)人: | 王杨 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | H04L51/18 | 分类号: | H04L51/18;H04L67/141;H04L67/146;H04L67/10 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 吕俊秀 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 消息 处理 方法 装置 电子设备 可读 存储 介质 | ||
本发明实施例提供了一种消息处理方法、装置、电子设备及可读存储介质,其中的方法包括:接收生产服务器发送的第一消息,并将第一消息存储在与第一消息的业务类型对应的消息队列中,从消息队列中获取M个第一消息,采用M个第一线程将各第一消息写入到与第一目标业务标识对应的第一内存缓冲队列,确定与第一目标业务标识关联的第一目标服务地址,采用N个第二线程读取第一内存缓冲队列中的N个第一消息,并向第一目标服务地址对应的目标服务器发送N个第一请求消息,以调用N次目标服务器对应的服务对N个第一消息进行处理。从而可以实现较快的读取操作,在一定程度上避免消息队列中消息的积压,提高消息队列中消息的消费效率。
技术领域
本发明涉及数据处理技术领域,特别是涉及消息处理方法、装置、电子设备及可读存储介质。
背景技术
由于基于微服务架构的系统具有易于开发和维护等特点,目前已应用在较大项目的开发。同时为了实现微服务之间耦合、异步消息处理、限流削峰等功能,通常应用生产消费模式。
生产消费模式具体为:发布消息的服务器(生产服务器)向生产服务器集群中的消息队列(MQ,Message Queue)发布消息,一个消息队列即一个缓冲区,消费消息的服务器(消费服务器)从消息队列中取出消息,并对消息进行处理,处理完一个消息再继续取下一个消息。其中,该生产服务器集群中的各存储服务器中可以设置有一个消息队列或多个消息队列。
然而,当由于某种原因(例如,消费服务器处理消息耗时较长)使消息队列中大量消息滞留,此种情况下则需要生产服务器必须暂停等待一下(即阻塞生产者线程),从而影响消息队列中的消息的消费效率。
发明内容
本发明实施例的目的在于提供一种消息处理方法、装置、电子设备及可读存储介质,以实现提高消息队列中的消息的消费效率。具体技术方案如下:
在本发明实施的第一方面,首先提供了一种消息处理方法,执行于缓冲服务器,包括:
接收生产服务器发送的第一消息,并将所述第一消息存储在与所述第一消息的业务类型对应的消息队列中;
从所述消息队列中获取M个第一消息,并采用M个第一线程将所述M个第一消息写入到与第一目标业务标识对应的第一内存缓冲队列,其中,所述第一目标业务标识为与所述第一消息的业务类型对应的标识,所述M为大于等于1的整数;
确定与所述第一目标业务标识关联的第一目标服务地址;
采用N个第二线程读取所述第一内存缓冲队列中的N个第一消息,并向所述第一目标服务地址对应的目标服务器发送N个第一请求消息,以调用N次所述目标服务器对应的服务对所述N个第一消息进行处理,其中,每个所述第一请求消息中包括一个第一消息,所述N为大于所述M的整数。
在本发明实施的第二方面,还提供了一种消息处理装置,设置于缓冲服务器,包括:
接收模块,用于接收生产服务器发送的第一消息,并将所述第一消息存储在与所述第一消息的业务类型对应的消息队列中;
获取模块,用于从所述消息队列中获取M个第一消息,并采用M个第一线程将所述M个第一消息写入到与第一目标业务标识对应的第一内存缓冲队列,其中,所述第一目标业务标识为与所述第一消息的业务类型对应的标识,所述M为大于等于1的整数;
确定模块,用于确定与所述第一目标业务标识关联的第一目标服务地址;
发送模块,用于采用N个第二线程读取所述第一内存缓冲队列中的N个第一消息,并向所述第一目标服务地址对应的目标服务器发送N个第一请求消息,以调用N次所述目标服务器对应的服务对所述N个第一消息进行处理,其中,每个所述第一请求消息中包括一个第一消息,所述N为大于所述M的整数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010246268.9/2.html,转载请声明来源钻瓜专利网。