[发明专利]应用于电力用户用电信息采集系统的电能量数据写库方法

摘要

本发明涉及一种应用于电力用户用电信息采集系统的电能量数据写库方法，该方法事先在数据库中构建一个按日进行分区，且主键索引为本地索引的计量点电能示值表。本发明通过采用分区存储技术将采集数据日冻结表码示值按日进行分区存储，在数据写库及抽取时按分区进行，可最小化操作数据集，有效降低了数据写库及抽取时间，从而提升数据写库效率。采用分步式缓存存储方法，将次日需要采集的计量点在每日空闲时段进行预存储，在进行数据采集时直接进行记录更新，减少了与数据库交互的次数，大大提高了数据写库效率。采用BATCH批处理技术，单线程可实现每秒2万条记录入库且支持多线程并发写入，大幅提升数据采集入库执行效率。

主权项

一种应用于电力用户用电信息采集系统的电能量数据写库方法，其特征在于：事先在数据库中构建一个按日进行分区，且主键索引为本地索引的计量点电能示值表，该方法包括以下步骤：步骤一、每日空闲时间数据预存储：在每日采集前的系统空闲时间将待采集计量点的标识和日期预先初始化到计量点电能示值表的指定分区中；步骤二、每日定时采集计量点电能示值数据并缓存：定时同步启动各待采集终端的计量点电能示值数据采集，将采集回的数据插入日期标签后以文件形式缓存到指定机器上，设定文件大小，超过设定值的文件作为历史文件维护在存储文件队列中；步骤三、启动写库线程：在数据采集同时启动数据存盘线程，采用批处理方式对存储文件队列中的文件进行数据写库处理，将数据更新至对应日期的分区表中。