[发明专利]电力数据处理方法、装置、计算机设备在审
申请号: | 202110052319.9 | 申请日: | 2021-01-15 |
公开(公告)号: | CN112699130A | 公开(公告)日: | 2021-04-23 |
发明(设计)人: | 梁雪青;杜舒明;赵小凡;张志亮;杨荣霞 | 申请(专利权)人: | 广东电网有限责任公司广州供电局;广州穗能通能源科技有限责任公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/28;G06F9/54 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 聂榕 |
地址: | 510620 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 电力 数据处理 方法 装置 计算机 设备 | ||
1.一种电力数据处理方法,其特征在于,所述方法包括:
获取电力业务处理需求;
从kafka消息队列调取与所述电力业务处理需求相关的电力参数;其中,预先通过flink流处理器向kafka消息队列注册消费者组,基于所述消费者组,通过所述kafka消息队列获取设定大小窗口的电力消费产生的电力参数,将所述电力参数写入到kafka消息队列;
对所述电力参数进行电力业务处理。
2.根据权利要求1所述的方法,其特征在于,在将所述电力参数写入到kafka消息队列之前,还包括:
校验各所述电力参数之间是否根据电力业务处理需求成功关联;
当各所述电力参数之间成功关联时,执行将所述电力参数写入到kafka消息队列的步骤;
当各所述电力参数之间关联失败时,将所述电力参数写入Hbase表。
3.根据权利要求1所述的方法,其特征在于,在将所述电力参数写入Hbase表之后,还包括:根据设定间隔阈值,每隔一个设定间隔阈值定期对所述Hbase表中的所述电力参数进行高频扫描,获得增量的所述电力参数,将增量的所述电力参数写入到kafka消息队列。
4.根据权利要求3所述的方法,特征在于,将增量的所述电力参数写入到kafka消息队列之后,还包括:
清理所述Hbase表中写入到所述kafka消息队列中的增量的所述电力参数。
5.根据权利要求2所述的方法,其特征在于,所述消费者组包括多种订阅主题,一种所述电力参数对应一种所述订阅主题;将所述电力参数写入Hbase表,包括:
根据不同的订阅主题,将关联失败的所述电力参数分别写入至对应的所述Hbase表中,一个所述Hbase表对应存储一种所述订阅主题所对应的所述电力参数。
6.根据权利要求4所述的方法,其特征在于,在预先通过flink流处理器向kafka消息队列注册消费者组之后,还包括:
根据所述电力参数的产生时间点和电力参数的测量点确定所述Hbase的主键;
清理所述Hbase表中写入到所述kafka消息队列中的增量的所述电力参数,包括:
当所述Hbase表中的主键相同时,仅保留最新的所述产生时间点获得的所述电力参数,清理所述Hbase表中写入到所述kafka消息队列中的增量的所述电力参数。
7.一种电力数据处理装置,其特征在于,所述装置包括:
业务处理需求获取模块,用于获取电力业务处理需求;
电力参数获取模块,用于从kafka消息队列调取与所述电力业务处理需求相关的电力参数;其中,通过flink流处理器向kafka消息队列注册消费者组,基于所述消费者组,通过所述kafka消息队列获取设定大小窗口的电力消费产生的电力参数,将所述电力参数写入到kafka消息队列;
电力业务处理模块,用于对所述电力参数进行电力业务处理。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
关联校验装置,用于校验各所述电力参数是否根据电力业务处理需求成功关联;当各所述电力参数之间成功关联时,执行将所述电力参数写入到kafka消息队列的步骤;当各所述电力参数之间关联失败时,将所述电力参数写入Hbase表。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东电网有限责任公司广州供电局;广州穗能通能源科技有限责任公司,未经广东电网有限责任公司广州供电局;广州穗能通能源科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110052319.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:挂壁式新能源汽车充电桩及使用方法
- 下一篇:一种高校发展状态数据管理系统