[发明专利]基于分布式架构的海量遥感数据处理方法及系统

说明书

本发明涉及海量遥感应用服务技术领域，为基于分布式架构的海量遥感数据处理方法及系统。其方法包括：S1、获取所需查找信息；S2、进行海量遥感影像数据库检索，如检索的遥感影像文件没有关联的地图瓦片服务则转入步骤S3，否则转入步骤S6；S3、在线构建遥感影像数据金字塔，如选择保存遥感瓦片数据并发布地图瓦片服务，则转入步骤S4，如选择不保存，则转到步骤S6；S4、将遥感瓦片数据同步入库；S5、进行遥感瓦片数据空间索引存储；S6、对地图瓦片服务发布显示。本发明通过分布式架构，实现了大数据时代海量遥感数据存储、管理、可视化和数据服务一站式处理的需求。

技术领域

本发明涉及海量遥感应用服务技术领域，尤其涉及基于分布式架构的海量遥感数据处理方法及系统。

背景技术

随着遥感数据获取手段的增加，遥感数据逐步呈现多源、多尺度、多时相等特征，然而数据量的爆炸性增长，使得需要处理的遥感数据信息急剧增加，导致海量遥感数据存放零散无序、数据安全没保障、数据检索查找困难等问题的出现。以栅格文件为主的海量遥感数据无法快速地共享和直接使用，而基于商业软件影像服务发布的技术，自动化程度低，服务提供不及时，难以快速可视化浏览，数据存储与数据服务脱节，无法将数据资源快速转为地图服务，造成海量遥感影像“存而无用”，数据资源大量闲置。

在现有技术中，对海量遥感管理、服务发布、在线可视化浏览的技术大多数是相互独立的，或为了解决海量遥感数据存储管理的需求，或为了解决遥感数据快速发布的需求，缺少一个将两者有机结合的方法和系统。如于2016年6月8日授权公告的发明名称为《一种遥感数据需求一站式处理方法》、授权公告号为CN 103559327B的发明专利，提供了一种整合在线数据服务、归档数据调用、数据生产调度和编程数据服务的遥感数据需求一站式处理方法，但该方法依然采用传统技术路线，偏重数据快速分发，对于海量遥感数据管理以及可视化显示则没有考虑；于2018年8月10日授权公告的发明名称为《一种基于Hadoop的大数据遥感卫星数据处理系统》、授权公告号为CN 105045856B的发明专利，主要是基于Hadoop的数据平台实现遥感卫星数据的分布式存储和管理，但没有将遥感数据转换为遥感地图服务，无法满足海量遥感影像数据在线可视化浏览；于2019年12月3日公开的发明名称为《一种海量影像服务快速发布与浏览方法及系统》、公开号为CN 110427446A的发明申请提出了一套影像服务发布流程，利用服务器集群对栅格数据进行分布式文件存储、分布式裁剪及更新，将数据进行压缩后存入分布式数据库，其影像服务发布主要是通过读取分布式数据库或直接原数据绘制来进行可视化显示，由于没有建立空间数据索引，查询浏览性能较低，此外，没有考虑利用分布式计算框架来提升影像服务计算处理能力。

因此，需要寻找一种更有序、更高效管理遥感数据，并快速提供遥感地图服务及可视化显示，实现“数据到服务”快速转化的技术方案。

发明内容

为解决现有技术所存在的技术问题，本发明提供基于分布式架构的海量遥感数据处理方法及系统，通过分布式架构，实现了海量遥感“从数据到服务”的快速转换，做到所见即所得，有效解决了用户对海量遥感数据处理及地图服务应用的高时效性需求问题，满足了大数据时代海量遥感数据存储、管理、可视化和数据服务一站式处理的需求。

本发明方法采用以下技术方案来实现：基于分布式架构的海量遥感数据处理方法，包括以下步骤：

S1、获取所需查找的信息，得到检索条件；

S2、对检索条件进行分析，查找影像数据文件元数据信息及其关联的地图服务元数据信息，将符合检索条件的结果反馈到交互界面，当检索的遥感影像数据文件没有关联的地图瓦片服务时转入步骤S3，否则转入步骤S6；

S3、在线构建遥感影像数据金字塔，对所检索的遥感影像数据文件进行遥感影像瓦片金字塔的在线构建；同时根据需要选择保存遥感影像瓦片数据并发布地图瓦片服务，则转入步骤S4，如果选择不保存遥感影像瓦片数据的实时动态地图服务，即将遥感瓦片数据存放在内存中时，则转到步骤S6；