[发明专利]一种基于OpenTsdb实时同步时序数据至Kafka的方法在审
申请号: | 202011219627.8 | 申请日: | 2020-11-03 |
公开(公告)号: | CN112328684A | 公开(公告)日: | 2021-02-05 |
发明(设计)人: | 苑晓龙;孙思清;贾德星;刘牧 | 申请(专利权)人: | 浪潮云信息技术股份公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F9/445 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 冯春连 |
地址: | 250100 山东省济南市高*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 opentsdb 实时 同步 时序 数据 kafka 方法 | ||
1.一种基于OpenTsdb实时同步时序数据至Kafka的方法,其特征在于,利用OpenTsdb自定义插件机制自定义opentsdb-rtpub-kafka插件,自定义的opentsdb-rtpub-kafka插件运行在每个TSD实例中,将时序数据和注释数据实时发布至分布式消息队列Kafka中的相应主题。
2.根据权利要求1所述的一种基于OpenTsdb实时同步时序数据至Kafka的方法,其特征在于,自定义的opentsdb-rtpub-kafka插件包括Kafka实时发布插件配置单元和kafka实时发布器;
Kafka实时发布插件配置单元继承自Config类,负责设置和解析自定义opentsdb-rtpub-kafka插件相应Kafka集群的地址、主题及其他配置参数;
kafka实时发布器继承自abstract RTPublisher抽象类,负责将时序数据和注释数据实时发布至分布式消息队列Kafka中的相应主题。
3.根据权利要求1所述的一种基于OpenTsdb实时同步时序数据至Kafka的方法,其特征在于,自定义的opentsdb-rtpub-kafka插件基于插件版本、插件初始化及停止插件方法来管理插件的生命周期。
4.根据权利要求3所述的一种基于OpenTsdb实时同步时序数据至Kafka的方法,其特征在于,自定义的opentsdb-rtpub-kafka插件基于两个发布数据点方法,支持将值为整型和浮点型的时序数据根据参数配置项定义的时间间隔和每个批次的最大消息数量实时发布至数据点参数项指定的主题中。
5.根据权利要求4所述的一种基于OpenTsdb实时同步时序数据至Kafka的方法,其特征在于,自定义的opentsdb-rtpub-kafka插件基于发布注解方法,支持将注释数据根据参数配置项定义的时间间隔和每个批次的最大消息数量实时发布至注解参数项指定的主题中。
6.根据权利要求5所述的一种基于OpenTsdb实时同步时序数据至Kafka的方法,其特征在于,自定义的opentsdb-rtpub-kafka插件基于收集状态方法,将发送到Kafka中相应主题的时序数据数量和注释数据数量通过收集器分别收集至数据点和注解两个监控指标中。
7.根据权利要求5所述的一种基于OpenTsdb实时同步时序数据至Kafka的方法,其特征在于,利用OpenTsdb自定义插件机制自定义opentsdb-rtpub-kafka插件时,在OpenTsdb的配置文件opentsdb.config中增加opentsdb-rtpub-kafka插件的相关配置项,增加的配置项包括发布插件路径、启用标识、插件全路径、kafka集群地址、数据点主题、注解主题。
8.根据权利要求7所述的一种基于OpenTsdb实时同步时序数据至Kafka的方法,其特征在于,利用OpenTsdb自定义插件机制自定义opentsdb-rtpub-kafka插件后,需要将opentsdb-rtpub-kafka插件复制到时序数据库核心插件路径参数项指定的路径下,随后即可在TSD实例启动的同时启用opentsdb-rtpub-kafka插件;
启用opentsdb-rtpub-kafka插件后,即可异步且实时的将时序数据和注释数据发送至分布式消息队列Kafka的相应主题中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮云信息技术股份公司,未经浪潮云信息技术股份公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011219627.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于施工现场的钢筋绑扎辅助装置
- 下一篇:扶壁框架式挡土墙