[发明专利]电力大数据预处理的属性约简方法有效
申请号: | 201510310151.1 | 申请日: | 2015-06-08 |
公开(公告)号: | CN104899447B | 公开(公告)日: | 2017-09-26 |
发明(设计)人: | 李刚;焦谱;宋雨;申金波 | 申请(专利权)人: | 华北电力大学(保定) |
主分类号: | G06F19/00 | 分类号: | G06F19/00;G06Q50/06 |
代理公司: | 石家庄冀科专利商标事务所有限公司13108 | 代理人: | 李羡民,高锡明 |
地址: | 071003 河*** | 国省代码: | 河北;13 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 电力 数据 预处理 属性 方法 | ||
1.一种电力大数据预处理的属性约简方法,其特征是,所述方法首先将电力系统中的属性视作变迁关系,属性值作为在相应变迁关系作用下的转换状态;然后把在某一顺序变迁关系组的转换下到达相同终止状态的一些变迁序列去掉中间的冗余状态,仅保留关键路径;最后将关键路径上的变迁关系解码为相应的属性输出;
所述方法具体按如下步骤进行:
a.把电力大数据集看作一个由三元组S=(U,A,V)表示的电力系统信息决策表,其中U作为论域,表示全体对象的有限非空集合;A=C∪{D},C是条件属性构成的集合,D是决策属性;V是属性a的值域,即Va∈V,假设该决策表含有n个对象,每个对象又包括m个条件属性,一个决策属性D;
b.把电力大数据集根据其决策属性D的不同取值划分等价类,若决策属性D有k种不同取值则根据决策属性D的值划分为k个不同等价类,如下:
其中,表示第j个对象在第i个属性上的取值;
c.所述k个不同等价类内的数据集分别再进行划分,根据其数据量的大小依次划分为n1,n2,…,nk个数据分片;
d.把步骤c划分好的各个数据分片内电力数据集中的每条记录视作一个对象,各属性视为变迁关系,各属性值看作在相应变迁关系作用下转换的中间状态,调用n1+n2+…+nk台集群中的计算机worker,分别将各数据分片内数据集的各个对象在相应的worker中从初始状态O在各变迁关系的作用下朝着决策状态进行变换:
其中Oj表示第j个对象的初始状态且所有对象的初始状态量相同,表示第j个对象在变迁关系ci的作用下转换到的相应中间状态,为初始状态Oj经各变迁关系c1,c2,…,cn,D,变换之后的终止状态,i表示第i个属性;
e.针对步骤c划分好的各个数据分片内电力数据集中的所有对象在步骤d所调用的相应worker中定义一个整型变量f,调用步骤d的状态转换程序,执行以下循环:
定义f值从1到i:
f.若步骤e中相应数据分片内的各个对象,从初始状态向决策状态转换的过程中存在多个对象都经过若干个相同状态的转换,到达相同的决策状态,则只保留这些对象所历经的相同状态;
g.针对步骤f的处理结果,在相应worker中,把从相同状态量经同样的变迁关系转换之后又得到相同状态量的所有对象只保留一个;
h.根据步骤g的处理结果,若各worker中存在多个对象,则在相应worker中,求这些对象所历经状态的并集,否则,处理结果为步骤g中由各worker中所求得的单个对象历经状态的集合,该集合中不包括初始状态与决策状态;
i.在相应worker中对步骤h的处理结果进行统计,若不存在步骤f中所提及的情况,则约简结果为全部条件属性,否则遍历步骤h的约简结果,把中间状态量的集合解码为其所对应的属性集合,作为约简结果输出;
步骤b把电力大数据集根据其决策属性D的不同取值划分等价类后,若决策属性的取值种类超过设定值,则后续的约简过程可按照以下步骤进行:
①把步骤b划分好的各个等价类内电力数据集中的每条记录视作一个对象,各属性视为变迁关系,各属性值看作在相应变迁关系作用下转换的中间状态,调用k台worker,worker即为集群众的计算机,分别将各等价类内数据集的各个对象在相应的worker中从初始状态O在各变迁关系的作用下朝着决策状态进行变换:
其中Oj表示第j个对象的初始状态且所有对象的初始状态量相同,表示第j个对象在变迁关系ci的作用下转换到的相应中间状态,为初始状态Oj经各变迁关系c1,c2,…,cn,D,变换之后的终止状态;
②针对步骤b划分好的各个等价类内电力数据集中的所有对象,在步骤①所调用的相应worker中定义一个整型变量f,调用步骤①的状态转换程序,执行以下循环:
定义f值从1到i:
③若步骤②中相应等价类内的各个对象,从初始状态向决策状态转换的过程中存在多个对象都经过若干个相同状态的转换,到达相同的决策状态,则只保留这些对象所历经的相同状态;
④对步骤③的处理结果,在相应worker中,把从相同状态量经同样的变迁关系转换之后又得到相同状态量的所有对象只保留一个;
⑤根据步骤④的处理结果,若各worker中存在多个对象,则在相应worker中,求这些对象所历经状态的并集,否则,处理结果为步骤④中由各worker中所求得的单个对象历经状态的集合,该集合中不包括初始状态与决策状态;
⑥在相应worker中对步骤⑤的处理结果进行统计,若不存在步骤③中所提及的情况,则约简结果为全部条件属性,否则遍历步骤⑤的约简结果,把中间状态量的集合解码为其所对应的属性集合,作为约简结果输出,算法结束。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华北电力大学(保定),未经华北电力大学(保定)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510310151.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:双槽或单槽水池挤压成型用油压机
- 下一篇:一种钢丝帘布胶皮压贴机
- 同类专利
- 专利分类
G06F 电数字数据处理
G06F19-00 专门适用于特定应用的数字计算或数据处理的设备或方法
G06F19-10 .生物信息学,即计算分子生物学中的遗传或蛋白质相关的数据处理方法或系统
G06F19-12 ..用于系统生物学的建模或仿真,例如:概率模型或动态模型,遗传基因管理网络,蛋白质交互作用网络或新陈代谢作用网络
G06F19-14 ..用于发展或进化的,例如:进化的保存区域决定或进化树结构
G06F19-16 ..用于分子结构的,例如:结构排序,结构或功能关系,蛋白质折叠,结构域拓扑,用结构数据的药靶,涉及二维或三维结构的
G06F19-18 ..用于功能性基因组学或蛋白质组学的,例如:基因型–表型关联,不均衡连接,种群遗传学,结合位置鉴定,变异发生,基因型或染色体组的注释,蛋白质相互作用或蛋白质核酸的相互作用
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置