[发明专利]一种基于storm的铁路地质灾害监测大数据预处理方法及系统有效
申请号: | 202011519895.1 | 申请日: | 2020-12-21 |
公开(公告)号: | CN112700622B | 公开(公告)日: | 2022-05-17 |
发明(设计)人: | 王珣;陆鑫;袁焦;伏坤;金劭南;杨科;刘勇;潘兆马;邹文露;余博;杨俊超;杨学锋;徐鑫;杨森;姚书琴;裴起帆 | 申请(专利权)人: | 中铁二院工程集团有限责任公司 |
主分类号: | G08B21/10 | 分类号: | G08B21/10;G01D21/02;G06K9/62;H04L67/10 |
代理公司: | 四川力久律师事务所 51221 | 代理人: | 韩洋 |
地址: | 610031 *** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于storm的铁路地质灾害监测大数据预处理方法及系统,包括:基于开源流计算storm框架为每个监测点的每个传感器数据提供并行的子计算模块,在每个子计算模块中实现铁路地质灾害监测大数据ETL处理,实现对不同监测点的多种传感器数据的实时并行预处理,有效提高数据处理效率、提高数据清洗质量;有效解决传统方法串行处理执行效率不高、不能满足监测大数据的处理需求的问题,能够满足铁路地质灾害监测数据预处理的实时性、时效性、高精度等要求,适用于复杂铁路地质灾害监测大数据实时分析与预警应用场景;同时,本发明所提供的基于storm的ELT处理方法同样也适用于其它存在多个工程监测点、多种监测数据的复杂工程。 | ||
搜索关键词: | 一种 基于 storm 铁路 地质灾害 监测 数据 预处理 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中铁二院工程集团有限责任公司,未经中铁二院工程集团有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011519895.1/,转载请声明来源钻瓜专利网。