[发明专利]一种实现storm对接非开源消息中间件的方法在审
申请号: | 202110857845.2 | 申请日: | 2021-07-28 |
公开(公告)号: | CN113760576A | 公开(公告)日: | 2021-12-07 |
发明(设计)人: | 王大伟 | 申请(专利权)人: | 北京思特奇信息技术股份有限公司 |
主分类号: | G06F9/54 | 分类号: | G06F9/54 |
代理公司: | 北京汇信合知识产权代理有限公司 11335 | 代理人: | 王维新 |
地址: | 100086 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 实现 storm 对接 非开源 消息 中间件 方法 | ||
本发明公开了一种实现storm对接非开源消息中间件的方法,包括:自定义Hosts,连接消息中间件地址的实体对象;自定义Config类,创建消息中间件连接及配置信息;自定义消费者,非开源消息中间件消费者实现;自定义Spout,接收消息中间件数据后发出storm消息。本发明的storm可直接对接非开源消息中间件,减少数据流转环节,减少数据流在中间过程环节的风险。
技术领域
本发明涉及计算机软件应用技术领域,具体涉及一种实现storm对接非开源消息中间件的方法。
背景技术
电信行业异步事件解析,storm流处理技术接收消息中间件的异步消息,快速处理解析消息内容,storm基于开源的Kafka等有直接的对接方式,而对于非开源(如自研)消息中间件无法做到全部适配。
传统的storm对接非开源消息中间件的方式是通过异步调度方式接收非开源消息中间件后,再将消息发送到开源Kafka中,而后storm对接Kafka中的消息;但是,上述处理方式增加了中间环节和业务复杂度,加大了问题风险点。
发明内容
针对现有技术中存在的上述问题,本发明提供一种实现storm对接非开源消息中间件的方法。
本发明公开了一种实现storm对接非开源消息中间件的方法,包括:
自定义Hosts,连接消息中间件地址的实体对象;
自定义Config类,创建消息中间件连接及配置信息;
自定义消费者,非开源消息中间件消费者实现;
自定义Spout,接收消息中间件数据后发出storm消息。
作为本发明的进一步改进,通过Hosts创建消息中间件连接及配置信息。
作为本发明的进一步改进,使用自定义Config连接消息中间件,并实现消息的消费。
作为本发明的进一步改进,自定义Spout继承Storm内部基础类BaseRichSpout,同时重写继承类的方法。
作为本发明的进一步改进,还包括:Storm基础拓扑编写,使用自定义的spout接收消息。
与现有技术相比,本发明的有益效果为:
本发明的storm可直接对接非开源消息中间件,减少数据流转环节,减少数据流在中间过程环节的风险。
附图说明
图1为本发明一种实施例公开的实现storm对接非开源消息中间件的方法的流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面结合附图对本发明做进一步的详细描述:
如图1所示,本发明提供一种实现storm对接非开源消息中间件的方法,其封装代码继承开源基础spout及spout,接收并消费闭源消息后通过storm拓扑进行数据流处理;具体包括:
步骤1、定义Hosts类,连接消息中间件地址的实体对象;
步骤2、自定义Config类,通过Hosts创建消息中间件连接及配置信息;
步骤3、自定义消费者类,非开源消息中间件消费者实现,使用自定义Config来连接消息中间件,并实现消息的消费;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京思特奇信息技术股份有限公司,未经北京思特奇信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110857845.2/2.html,转载请声明来源钻瓜专利网。