[发明专利]一种电力信息大数据的采集和存储方法

说明书

本发明属于电力信息大数据采集存储领域。涉及一种电力信息大数据采集存储方法，解决电力信息大数据采集和存储过程的问题。所述方法包括数据采集、数据存储管理以及数据分析三个过程。本发明的有益效果在于：本发明提出了一种电力信息大数据的采集存储方法，能够很好的解决由于电力用户基数大，信息量大，业务系统响应速度慢，用户等待耗时长的问题。同时，针对基与电力数据的交易系统产生的海量信息，本方法比传统数据库能更好地完成数据的扩展和分析功能。并且能够采集、存储并处理海量网络媒体数据，更好地了解行业动态，在操作过程中，本方法的存储方法具有高效地查询功能，在数据量激增的同时能够快速完成检索。

技术领域

本发明属于电力信息大数据采集存储领域。涉及一种电力信息大数据采集存储方法，解决电力信息大数据采集和存储过程的问题。

背景技术

信息技术的飞速发展以及广泛应用，使得电力生产企业、交易部门及用户使用物联网和互联网积累了大量的数据。随着数据库应用的规模、范围不断地扩大，电力管理部门及相关企业利用计算机管理事务能力的增强，产生了庞大的大规模数据集，将如此庞大的数据集采集并存储到服务器上是非常复杂的。原本很多数据采集算法在数据集规模较小时尚能取得不错的采集效果，但是针对大规模数据集，计算量太大以至于不能在可接受的时间内获得很好的结果。

电力系统是指由发电、输电、变电、配电和用电等环节共同组成的电能生产与消费系统。为实现电能的生产和供销，同时保证电网安全稳定运行，电力系统在各个环节和不同层次分别配置了相应的信息与控制系统，这些系统由各种采集传感器、监测设备、通信设备、安全保护装置、自动控制装置以及监控自动化、调度自动化系统组成，并采集、传输和存储海量数据。电力大数据是以业务趋势预测、数据价值挖掘为目标，利用数据集成管理、数据存储、数据计算、分析挖掘等方面核心关键技术，实现面向典型业务场景的模式创新及应用提升。电力大数据涉及到发电、输电、变电、配电、用电、调度各环节，是跨单位、跨专业、跨业务的数据分析与挖掘，以及数据可视化。电力大数据通过信息化服务平台，驱动电力价值链的改变，从传统的以电力生产为核心，最终落到以人为中心的根本任务上，而让数据创造价值的理念，可以推动电力从传统的高耗能、高排放、低效率的粗放式发展，转向新型的低能耗、低排放、高效率的可持续发展。

电力大数据超过了传统技术数据处理技术能力，为了获得数据中的价值，必须建立新支撑体系以进行电力大数据的管理和应用，这需要大规模并行处理的数据管理及处理能力。云计算技术能够通过网络将分散的信息资源，包括计算、存储、软件等，集中起来形成共享的资源池，并以动态按需和可度量的方式向用户提供服务，实现大规模计算的信息处理方式。云计算为大数据处理提供丰富的计算和存储资源，动态按需地分配调整，为电力大数据建设与应用提供IT资源。电力大数据的技术研究以云计算为基础，建立具有电力行业特点的电力云计算数据中心，研究适合电力大数据的价值规律、应用场景的大数据系统框架、数据分析方法是电力大数据的发展方向。电力大数据的内在价值规律体现在更大范围内的最大限度共享和创造新的价值。电力大数据的应用价值根本体现在其共享及价值外延，总的来说：电力大数据价值＝数据原始应用价值+数据共享应用衍射价值。

目前具有电力大数据特征的典型业务如用电信息采集系统，电力用户基数大，每天产生的数据量庞大，导致业务系统在统计分析业务上出现了响应缓慢，用户等待时间较长的问题，基于电力大数据的交易系统产生的海量信息，使用传统的数据库已经无法完成数据的扩展和分析功能。为了更好地了解行业动态，如何有效地解决海量的网络媒体数据的采集，存储，数据量的激增导致数据检索操作速度缓慢。

发明内容

本发明的目的，就是要解决基于电力大数据的采集、存储以及分析，提高效率。

本发明的技术方案如下：