[发明专利]一种多模异构电力大数据融合分析管理系统及方法在审
申请号: | 201710404706.8 | 申请日: | 2017-06-01 |
公开(公告)号: | CN108985531A | 公开(公告)日: | 2018-12-11 |
发明(设计)人: | 郭媛君;莫文雄;胡金星;熊文;王勇;黄慧红;黄炎光 | 申请(专利权)人: | 中国科学院深圳先进技术研究院;广州供电局有限公司 |
主分类号: | G06Q10/06 | 分类号: | G06Q10/06;G06Q50/06;G06F17/30 |
代理公司: | 深圳市科进知识产权代理事务所(普通合伙) 44316 | 代理人: | 赵勍毅 |
地址: | 518055 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 大数据 访问接口 数据库 算法库 分析管理系统 分析引擎 多模 异构 融合 多源数据采集 数据管理 管理子系统 数据接口层 并行运算 存储数据 电力专业 计算分析 模型提供 数据采集 数据接口 数据类型 数据资产 数据处理 数据源 调用 上层 挖掘 访问 分析 管理 | ||
1.一种多模异构电力大数据融合分析管理系统,其特征在于,包括有:
多源数据采集层(1),用于对多个数据源进行数据采集;
数据接口层(2),其连接于多源数据采集层(1),所述数据接口层(2)对应多种数据类型而分别设有多个数据接口,并利用相应数据类型的数据接口接收多源数据采集层(1)所采集的数据;
电力大数据融合管理子系统(3),其连接于数据接口层(2),所述电力大数据融合管理子系统(3)包括有多个开源数据库,所述开源数据库用于对所述数据接口层(2)接收的数据进行分别存储;
大数据分析引擎(4),其连接于电力大数据融合管理子系统(3),所述大数据分析引擎(4)包括有基于Spark并行运算框架的开源算法库,通过调用开源算法库中相应的分析方法实现对所述开源数据库中存储数据的计算分析;
模型访问接口层(5),连接于大数据分析引擎(4)和开源数据库,所述模型访问接口层(5)包括有多种访问接口,藉由相应的访问接口而实现对开源算法库和开源数据库的访问。
2.如权利要求1所述的多模异构电力大数据融合分析管理系统,其特征在于,所述数据接口层(2)包括有用于传输关系型数据的SQOOP接口(21)、用于传输实时数据流的JMS接口(22)和用于传输常规数据的FTP接口(23);
所述电力大数据融合管理子系统(3)包括有数据仓库工具Hive(31)、Hbase数据库(32)、SQL大数据查询工具Impala(33)和Hadoop资源管理器YARN(34)。
3.如权利要求1所述的多模异构电力大数据融合分析管理系统,其特征在于,所述大数据分析引擎(4)中的Spark并行运算框架包括有大规模流式数据处理框架Spark Streaming(41)、用于从R语言中使用Apache Spark的语言包Spark R(42)、机器学习算法库MLlib(43)、用于执行图并行计算的Spark GraphX(44)和Python编程环境(45)。
4.如权利要求1所述的多模异构电力大数据融合分析管理系统,其特征在于,所述大数据分析引擎(4)中的开源算法库包括有:
时空地理分析模块(46),用于构建设备、电网和环境大数据的时空关联及约束过程反馈模型;
影响范围分析模块(47),用于为确定图中两节点提供可达性查询,以及计算最短可达路径及距离;
图计算分析模块(48),其利用GraphX计算工具对电网拓扑结构形成的图类进行计算分析;
关联关系分析模块(49),其利用机器学习算法库MLlib中的挖掘算法,对电网运行状态、设备状态和环境因素之间的强弱关联关系进行挖掘,并建立关联关系库。
5.如权利要求1所述的多模异构电力大数据融合分析管理系统,其特征在于,所述模型访问接口层(5)包括有:
Java数据库连接接口JDBC(51),用于执行SQL语句;
开放数据库连接ODBC(52),用于支持SQL语言;
Spark SQL(53),用于实现对结构化数据的计算;
HUE接口(54),用于实现Hadoop生态系统的开发和调试。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院深圳先进技术研究院;广州供电局有限公司,未经中国科学院深圳先进技术研究院;广州供电局有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710404706.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:车辆危险行为管理方法及装置
- 下一篇:基于碳排放的网源荷调度评估系统及方法
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理