[发明专利]一种基于多类型设备的大数据处理方法、系统及可读介质在审
申请号: | 202111188142.1 | 申请日: | 2021-10-12 |
公开(公告)号: | CN114116861A | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 邱伟;黄文龙;叶杰琛;黄建榮;林观辉;王顺超;韩东兴;郭坤阳;杨振亚;南颖;马方远;王军 | 申请(专利权)人: | 国家电网有限公司;国网新源控股有限公司;福建厦门抽水蓄能有限公司;国网信息通信产业集团有限公司;北京国电通网络技术有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/27;G06F16/215 |
代理公司: | 厦门市首创君合专利事务所有限公司 35204 | 代理人: | 张松亭 |
地址: | 100031 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于多类型设备的大数据处理方法、系统及可读介质,通过构建以ETL层、服务层和存储层组成的大数据平台,ELT层包括数据采集模块和数据支撑模块,服务层包括Stream模块、批处理模块和GPU资源模块,存储层包括分布式存储模块,将原始数据通过数据清洗管道流入大数据集群或存储层,通过Stream模块对原始数据中的实时数据进行消费和实时计算,通过批处理模块对原始数据中的离线数据进行数据清洗;最后存储在分布式存储模块,并结合数据支撑模块实现数据的分类和发布。该方法能够让感知设备回传的复杂数据治理过程具备可编程性、可扩展性,彻底解决了抽水蓄电站基建现场数据难管理、难计算和使用率低下的问题。 | ||
搜索关键词: | 一种 基于 类型 设备 数据处理 方法 系统 可读 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国家电网有限公司;国网新源控股有限公司;福建厦门抽水蓄能有限公司;国网信息通信产业集团有限公司;北京国电通网络技术有限公司,未经国家电网有限公司;国网新源控股有限公司;福建厦门抽水蓄能有限公司;国网信息通信产业集团有限公司;北京国电通网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111188142.1/,转载请声明来源钻瓜专利网。
- 上一篇:具有一体成型油胶固化灯的指甲油瓶盖
- 下一篇:一种塑料薄膜吹塑设备