[发明专利]一种分布式光伏数据分层存储方法和系统有效
申请号: | 202011165876.3 | 申请日: | 2020-10-27 |
公开(公告)号: | CN112395289B | 公开(公告)日: | 2022-11-11 |
发明(设计)人: | 黄堃;王汉林;刘澄;汤海宁;李哲;赵景涛;张晓燕;杨文;吴仕平;严后杨;张长志;甘智勇;赵毅 | 申请(专利权)人: | 国电南瑞科技股份有限公司;国网天津市电力公司;国家电网有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/27;G06K9/62;G06Q50/06 |
代理公司: | 南京纵横知识产权代理有限公司 32224 | 代理人: | 张倩倩 |
地址: | 210006 江苏省南京*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 数据 分层 存储 方法 系统 | ||
1.一种数据分层存储系统,其特征是,包括智能终端、云端服务器和边缘端服务器;
智能终端采集分布式光伏数据,传输至边缘端服务器;
边缘端服务器接收和存储所述分布式光伏数据,按照预设的异常数据识别规则,进行异常数据识别,并存储异常数据识别结果;
边缘端服务器将所存储的光伏数据以及异常数据识别结果,同步至云端服务器;
云端服务器对边缘端服务器同步的数据进行分层存储处理,得到分层处理后的云端数据库,然后将云端数据库同步至边缘端数据库;
其中,所述云端服务器对边缘端服务器同步的数据进行分层存储处理,得到分层存储后的云端数据库,包括:
对接收到的数据进行分析得到能够并行处理的数据,将能够并行处理的数据分为同一类别;
对云端存储节点进行扩展;将各单个类别的数据存储至扩展后的单个存储节点;
将数据存储节点信息写入云端数据库;云端数据库存储各类别数据在服务器集群中的存储位置以及存储位置对应的服务器信息,以在用户访问时直接调取相应服务器上存储的数据;
云端服务器对接收到的数据进行分析得到能够并行处理的数据包括:利用预先训练的基于监督学习算法的朴素贝叶斯分类模型对数据进行分类,将属于同一分类的数据作为能够并行处理的数据;
所述基于监督学习算法的朴素贝叶斯分类模型对数据进行分类的过程包括:
a2)对于待分类数据集中的任一数据项X,分别计算数据项距离其正例集聚类中心和反例集聚类中心的距离和
b2)对于任一类别am,计算与的差值,若且则X∈am;若或则其中εm为对应类别am预设的距离差值阈值;若存在数据项满足或者对于所有类别皆满足则转至步骤c2;
c2)利用以下公式计算数据项属于各类别的概率,然后转至步骤d2:
式中,Bi为a1,a2,...,aM中的一个类别,n为数据项X的维数,Xj为数据项X的第j维数据;
d2)将概率计算结果最大值对应的类别作为数据项的类别;
云端服务器对云端存储节点进行扩展包括:
a3)确定存储节点数量:将整个光伏系统以变电站为单位划分为二维逻辑网格,网格数量即为存储节点数量,第i个网格的标号定义为:xi为第i个网格的地理坐标,d为网格边长;
b3)确定存储节点的层次:按照节点标号IDE从小到大的顺序,选择2N个存储节点作为第一层存储节点,将第一层存储节点的存储级别设置为NL1=1,第一层之后第i层的存储节点数量为存储级别为NLi=NLi-1+1;
c3)确定各层次中各存储节点的存储量阈值:各层次中,按照节点标号IDE从小到大的顺序,存储节点的存储量阈值依次增大,且均小于存储节点的最大存储容量;
且对于存储节点i存在以下关系:
式中,Ti+1为一个存储层次中第i+1个存储节点的存储量阈值,Tn为一个存储层次中最后一个存储节点的存储量阈值,S为存储节点的最大存储容量。
2.根据权利要求1所述的数据分层存储系统,其特征是,边缘端服务器包括数据存储模块、数据处理模块和边缘端数据库,云端服务器包括数据存储模块、数据处理模块和云端数据库;
边缘端服务器将接收到的分布式光伏数据存储至边缘端数据存储模块;边缘端数据处理模块被配置用于执行异常数据识别,并将异常数据识别结果存储至边缘端数据存储模块;
云端服务器通过云端数据存储模块接收边缘端服务器同步的数据;云端数据处理模块被配置用于对数据存储模块中接收到的数据进行分层存储处理,并将数据存储节点信息记录至云端数据库,然后将云端数据库的数据同步至边缘端服务器的边缘端数据库中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国电南瑞科技股份有限公司;国网天津市电力公司;国家电网有限公司,未经国电南瑞科技股份有限公司;国网天津市电力公司;国家电网有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011165876.3/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置