[发明专利]一种基于大数据技术的用电信息采集系统及其采集方法

说明书

一种基于大数据技术的用电信息采集系统及其采集方法，涉及用电信息采集系统及其采集方法。目前用电信息采集系统存在高速海量数据存储计算模型欠缺和耗时、且计算效果不佳的问题。本发明包括：通信服务模块；数据存储模块：与通信服务模块相连，包括关系型数据库、分布式数据库及云存储，获取的用电信息数据对应存放至关系型数据库、分布式数据库及云存储中；数据处理模块：与数据存储模块相连，其包括定时计算服务单元、实时数据流处理单元、复杂事件流处理单元、海量数据离线处理单元及数据挖掘单元；数据展现模块：与数据存储模块相连。本技术方案实时计算和离线计算采用不同的处理方式，提高数据的实时处理能力和计算速度并有效减少存储空间。

技术领域

本发明涉及用电信息采集系统及其采集方法，尤其是一种基于大数据技术的用电信息采集系统及其采集方法。

背景技术

自2010年起全面推进用电信息采集系统建设。截至2014年7月份，国网27家单位全部开展了用电信息采集系统建设，全口径用户实现采集覆盖2.3亿户，采集覆盖率达到66.98%，采集的电量占总售电量比例达到93.49%。用电信息采集系统由系统主站、传输信道、采集终端以及智能电表组成。

系统主站负责整个系统的用电信息采集、存储、分析、处理和应用，由通信子系统、数据库、业务应用、接口应用等组成。大部分网省公司采用省级集中部署方式建设。

传输信道分为系统主站与终端之间的远程通信信道、终端与智能电表之间的本地通信信道。当前公司范围内采集系统远程通信信道主要采用GPRS/CDMA无线公网系统、230MHz无线专网信道、电话PSTN、光纤通信信道等。本地通信信道主要采用RS485、低压电力线载波（窄带、宽带）、微功率无线等。电力用户用电信息采集系统是对电力用户的用电信息进行采集、处理和实时监控的系统，实现用电信息的自动采集、计量异常监测、电能质量监测、用电分析和管理、相关信息发布、分布式能源监控、智能用电设备的信息交互等功能。

目前用电信息采集系统存在以下问题：

1.高速海量数据存储计算模型欠缺

现用电信息采集业务数据模型，面对浙江全省2000多万低压用户，在高频数据采集、存储、计算领域，存在不同种类、不同形式的海量数据存储、计算时间周期偏长；

2. 耗时两大且计算效果不佳，存在计算瓶颈

现用电信息采集数据计算，受制于oracle原内存空间、处理性能瓶颈，对于每天24点的全省全量数据，实现数据计算，耗时两大且计算效果不佳。

发明内容

本发明要解决的技术问题和提出的技术任务是对现有技术方案进行完善与改进，提供大数据技术的用电信息采集系统，以达到存储、计算能力增强。为此，本发明采取以下技术方案。

基于大数据技术的用电信息采集系统，包括：

通信服务模块：通过通信网络与采集设备相连以获得用电信息数据；

数据存储模块：与通信服务模块相连，包括关系型数据库、分布式数据库及云存储，获取的用电信息数据对应存放至关系型数据库、分布式数据库及云存储中；

数据处理模块：与数据存储模块相连，其包括定时计算服务单元、实时数据流处理单元、复杂事件流处理单元、海量数据离线处理单元及数据挖掘单元，所述的定时计算服务单元及关系型数据库相连；所述的实时数据流处理单元、复杂事件流处理单元与分布式数据库相连，所述的复杂事件流处理单元、海量数据离线处理单元、数据挖掘单元与云存储相连；

数据展现模块：与数据存储模块相连，以进行数据的展现，包括与分布式数据库相连的实时数据监测单元和与云存储相连的海量数据查询单元。

本技术方案实时计算和离线计算采用不同的处理方式，提高数据的实时处理能力和计算速度并有效减少存储空间。