[发明专利]面向用户用电信息采集系统的实时数据共享系统

说明书

本发明公开了一种面向用户用电信息采集系统的实时数据共享系统，包括流数据处理模块、Redis缓存系统、Kafka共享通道和权限管理模块；流数据处理模块解析数据流，把解析数据写入到指定kafka的主题，并接收权限管理模块下发的数据召测指令并转发；Redis缓存系统实现用电信息采集系统冷热数据分离和缓存数据；Kafka共享通道接受外围系统的数据请求、实现订阅/发布共享以及返回召测的实时数据；权限管理模块为外围系统创建账号及密码、token的生产与返回、权限验证与指令下发以及权限的管理。本发明实现了面向用户用电信息采集系统的实时数据共享，而且实时性好、可靠性好且稳定可靠。

技术领域

本发明属于信息自动化领域，具体涉及一种面向用户用电信息采集系统的实时数据共享系统。

背景技术

随着经济技术的发展和人们生活水平的提高，电能已经成为了人们生产和生活必不可少的二次能源，给人们的生产和生活带来了无尽的便利。因此，电力系统的稳定可靠运行，就成为了电力系统最重要的任务之一。

随着电网业务的不断发展，要求用户用电信息采集更实时、数据内容更全面。目前电网企业外围系统实时数据需求包括日常批量实时数据共享需求与数据召测实时共享需求两种，但是电网企业用电信息采集系统实时数据共享给其他外围系统还存在一定问题：一是，用电信息采集系统采集回来数据后存入到数据库中，其外围系统通过数据库OGG、ETL等方式来实现数据获取批量实时数据，但是在用电信息采集业务高峰期，数据库存在IO瓶颈问题，海量数据没法实时存入数据库。数据同步需要等待IO资源，业务高峰期时，数据共享延迟可达到2小时，无法满足日常批量实时数据分析的业务需求；二是，由于现场用户电表数据返回给用电信息采集系统主站的时间无法确定，外围系统调用用电信息采集系统的实时数据召测同步接口后，可能长时间处于阻塞状态，等待数据反馈，造成资源的浪费与程序阻塞。

发明内容

本发明的目的在于提供一种实时性好、可靠性好且稳定可靠的面向用户用电信息采集系统的实时数据共享系统。

本发明提供的这种面向用户用电信息采集系统的实时数据共享系统，包括流数据处理模块、Redis缓存系统、Kafka共享通道和权限管理模块；用电信息采集系统数据采集消息总线连接流数据处理模块，流数据处理模块的输出端同时连接用电信息采集系统数据库和Kafka共享通道；Redis缓存系统的输入端连接用电信息采集系统数据库，Redis缓存系统的输出端连接流数据处理模块；权限管理模块连接外围系统，权限管理模块的输入端连接外围系统和Kafka共享通道，权限管理模块的输出端连接外围系统和流数据处理模块；Kafka共享通道连接外围系统，同时Kafka共享通道的输入端连接外围系统和流数据处理模块，Kafka共享通道的输出端连接外围系统和权限管理模块；流数据处理模块用于进行数据流解析，然后把解析后的数据写入到指定Kafka的主题中，同时流数据处理模块还用于负责接收权限管理模块下发的数据召测指令，并负责把指令转发至用电信息采集系统数据采集消息总线；Redis缓存系统用于实现用电信息采集系统冷热数据分离，以及缓存用电信息采集系统数据库中的电网企业用户的档案数据；Kafka共享通道用于接受外围系统的数据请求、实现用电信息采集系统日常批量实时数据的订阅/发布共享以及向外围系统返回召测的实时数据；权限管理模块用于为外围系统创建账号及密码、用于token的生产与返回、权限验证与指令下发以及权限的管理；所述面向用户用电信息采集系统的实时数据共享系统用于实现日常批量数据的实时共享和实时召测数据的共享。

所述的流数据处理模块，从Redis缓存系统中读取系统用户档案信息，然后把采集设备的地址编号与采集计量点id、用户户号进行关联处理，处理后的数据以用户户号、计量点id作为数据内容的标识，以JSON格式结构化数据写入至Kafka共享通道对应的主题中进行共享。