[发明专利]基于kafka的消息处理方法及装置在审
申请号: | 201911201785.8 | 申请日: | 2019-11-29 |
公开(公告)号: | CN112882839A | 公开(公告)日: | 2021-06-01 |
发明(设计)人: | 高宗宝;张建强;雷鹏;刘丽美;张家铭;宋国兴 | 申请(专利权)人: | 中国移动通信集团设计院有限公司;中国移动通信集团有限公司 |
主分类号: | G06F9/54 | 分类号: | G06F9/54 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 苗晓静 |
地址: | 100080 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例提供一种基于kafka的消息处理方法及装置,包括:从客户端本地的偏移量文件中读取偏移量集合;判断偏移量集合中的偏移量信息是否有效,若否,则更新偏移量集合中的偏移量信息并利用更新后的偏移量信息对kafka消息进行处理同时将最新的偏移量信息写入至所述偏移量文件中。本实施例将读取kafka的偏移量文件存储到客户端中从而使得offset的更新安全且简易,异常控制方便。本实施例将kafka与其他存储介质松耦合,避免了第三方连接与连接导致的延迟,提升了数据读写效率。本实施例还对偏移量信息的有效性进行了判断,当偏移量信息无效时会对其进行更新,因此会避免出现数据重复读取或数据丢失的情况。 | ||
搜索关键词: | 基于 kafka 消息 处理 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团设计院有限公司;中国移动通信集团有限公司,未经中国移动通信集团设计院有限公司;中国移动通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201911201785.8/,转载请声明来源钻瓜专利网。
- 上一篇:套刻补偿的方法及其系统
- 下一篇:一种柴油机起动系统的试验平台和控制方法