[发明专利]基于Hadoop架构的气象大数据汇聚方法在审
申请号: | 202010305811.8 | 申请日: | 2020-04-17 |
公开(公告)号: | CN111488325A | 公开(公告)日: | 2020-08-04 |
发明(设计)人: | 张强;陈东辉;刘一鸣;韩瑞;罗岚心;高静;石岩;赵煜飞;刘雨佳;冯爱霞;战云健;姜筱玮;王妍;梁中军;兰平;范邵华;李默予 | 申请(专利权)人: | 国家气象信息中心 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/215;G06F16/25;G06F16/33;G06F16/28 |
代理公司: | 成都金英专利代理事务所(普通合伙) 51218 | 代理人: | 袁英 |
地址: | 100081 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于Hadoop架构的气象大数据汇聚方法,技术方案可概括为:首先搭建并部署多源异构气象大数据资源汇聚环境,然后获取气象分析的需求信息,根据需求信息通过可视化界面Web端配置资源汇聚信息创建资源汇聚任务,并配置资源汇聚任务基础信息,设计气象数据的清洗算法;设计资源汇聚的入口调用方法,根据资源汇聚任务进行资源汇聚参数配置,调用气象多源异构数据接口从不同类型的数据源中获取原始气象数据,利用设计的清洗算法对接入的原始气象数据进行数据清洗,最后将清洗后的气象数据存储到目标数据库,完成资源汇聚。通过本方案可获取不同数据源中的气象数据并对其进行数据清洗,完成数据的资源汇聚,为气象数据分析提供数据支持。 | ||
搜索关键词: | 基于 hadoop 架构 气象 数据 汇聚 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国家气象信息中心,未经国家气象信息中心许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010305811.8/,转载请声明来源钻瓜专利网。