[发明专利]偏移量处理方法、装置、电子设备及计算机可读存储介质在审
申请号: | 202010618284.6 | 申请日: | 2020-07-01 |
公开(公告)号: | CN111897662A | 公开(公告)日: | 2020-11-06 |
发明(设计)人: | 张兆龙 | 申请(专利权)人: | 中国建设银行股份有限公司;建信金融科技有限责任公司 |
主分类号: | G06F9/54 | 分类号: | G06F9/54 |
代理公司: | 北京市兰台律师事务所 11354 | 代理人: | 张峰 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 偏移 处理 方法 装置 电子设备 计算机 可读 存储 介质 | ||
1.一种偏移量处理方法,其特征在于,包括:
当从Kafka消息队列中获取到当前批次的目标消息时,对所述目标消息进行处理;
在完成对所述目标消息的处理后,将所述目标消息在所述Kafka消息队列中对应的目标偏移量发送给偏移量存储服务器,以使所述偏移量存储服务器存储所述目标偏移量。
2.根据权利要求1所述的方法,其特征在于,还包括:
当进行断点续传操作时,从所述偏移量存储服务器获取所述目标偏移量;
基于所述目标偏移量从Kafka消息队列中获取消息。
3.根据权利要求1所述的方法,其特征在于,还包括:
当接收到回退指令时,从所述存储服务器获取当前的所述目标偏移量的前一次目标偏移量;
基于所述前一次前偏移量从Kafka消息队列中获取消息。
4.根据权利要求1所述的方法,其特征在于,将所述目标偏移量发送给偏移量存储服务器,以使所述偏移量存储服务器存储所述目标偏移量,包括:
将所述目标偏移量以及对应的分区信息发送给偏移量存储服务器,以使所述偏移量存储服务器基于所述分区信息存储所述目标偏移量。
5.根据权利要求1-4中任一项所述的方法,其特征在于,所述偏移量存储服务器为zookeeper服务器。
6.一种偏移量处理装置,其特征在于,包括:
消息处理模块,用于在从Kafka消息队列中获取到当前批次的目标消息时,对所述目标消息进行处理;
偏移量发送模块,用于在完成对所述目标消息的处理后,将所述目标偏移量发送给偏移量存储服务器,以使所述偏移量存储服务器存储所述目标偏移量。
7.根据权利要求6所述的装置,其特征在于,还包括:断点续传模块,所述断点续传模块用于:
当进行断点续传操作时,从所述偏移量存储服务器获取所述目标偏移量;
基于所述目标偏移量从Kafka消息队列中获取消息。
8.根据权利要求6所述的装置,其特征在于,还包括:回退模块,所述回退模块用于:
当接收到回退指令时,从所述存储服务器获取当前的所述目标偏移量的前一次目标偏移量;
基于所述前一次前偏移量从Kafka消息队列中获取消息。
9.一种电子设备,其特征在于,包括处理器和存储器;
所述存储器,用于存储操作指令;
所述处理器,用于通过调用所述操作指令,执行权利要求1-5中任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-5中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国建设银行股份有限公司;建信金融科技有限责任公司,未经中国建设银行股份有限公司;建信金融科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010618284.6/1.html,转载请声明来源钻瓜专利网。