[发明专利]一种基于云存储的多源遥感影像数据多维度组织方法

说明书

本发明提供了一种基于云存储的多源遥感影像数据多维度组织方法，包括：首先构建遥感影像数据的公共云存储库及面向用户的影像数据映射库，为影像数据提供稳定及可扩展的存储；然后根据卫星影像数据的多维度特性定义映射数据的存储视图；最后根据云平台上不同用户的需求，提供用户之间遥感数据组织视图的分享，提升多维遥感数据的分发效率。本发明的有益效果是：为遥感影像数据使用者提供了在稳定、可扩展的云存储环境下，通过定义多维度视图自动按不同维度组织卫星影像数据的能力，并且能够将定义好的视图共享给其他用户，有效的提高了卫星影像数据的分发与数据准备效率。

技术领域

本发明涉及遥感影像数据处理领域，尤其涉及一种基于云存储的多源遥感影像数据多维度组织方法。

背景技术

目前卫星遥感技术为我们研究全球变化等课题提供了时间、空间、光谱、传感器多维度的海量遥感大数据。这些具有多维度的海量遥感数据分布存储于不同的卫星数据中心中，由于遥感领域大型应用如全球变化研究需要多个地区、不同卫星影像数据的多维度数据支持，从而开展大规模的数据处理与分析。因此将多个数据中心的遥感影像数据元数据集中构建数据仓库，利用多维度特点来组织遥感数据，满足用户进行遥感应用分析时所需要的数据组织与准备需求已成为当前遥感领域研究的重要发展趋势之一。

本发明提出利用构建遥感元数据数据仓库满足多中心数据检索需求、利用遥感数据的多维度的特性来设计云存储中针对于不同用户的虚拟数据视图的数据组织方式。对于全球变化等遥感应用研究来说，不仅仅需要多个地区的多种遥感影像数据的支持，还需要将遥感数据按照维度预先组织起来，例如分析地区覆盖变化的时候需要按地域，时间维度预先组织数据。手工的对这些数据进行分析前按维度组织的话会消耗大量的时间，因此，针对多类型遥感影像数据的自动化多维数据组织及管理方法便成了急需的解决方案。

发明内容

为了解决上述问题，本发明提供了一种基于云存储的多源遥感影像数据多维度组织方法，主要包括以下步骤：

S101：构建用于存储元数据的分中心和主中心；所述分中心和所述主中心均为云计算中的分布式架构；所述分中心和主中心均具有ftp服务功能；

S102：从资源卫星中心下载遥感影像数据的元数据，并存储于所述分中心中；所述遥感影像数据来自于多个卫星所一一对应的多个数据中心，且所述元数据具有多个维度，每个维度都有对应的字段；

S103：采用模板归纳及映射的方法，对分中心存储的所述元数据进行归一化处理，以消除不同数据中心的遥感影像数据的元数据的字段之间的差异，从而得到归一化后的元数据；

S104：采用爬虫算法，将所述归一化后的元数据集中存储至所述主中心中，通过solr数据库创建元数据索引，以为用户提供对元数据的查询检索服务；

S105：用户根据不同的处理任务，通过所述查询检索服务订阅所需要的元数据，并根据订阅的元数据的维度，构建自定义多维度视图，实现对多中心遥感数据的多维度组织。

进一步地，步骤S102中，从资源卫星中心下载遥感影像数据的元数据时，采用周期获取的方法，即每隔一段时间，自动从所述资源卫星中心下载遥感影像数据的元数据，存储于分中心中，并覆盖分中心中原有的元数据。

进一步地，步骤S102中，所述维度包括：时间维度、空间维度、光谱维度和传感器维度。

进一步地，步骤S103中，采用模板归纳及映射的方法，对分中心存储的所述元数据进行归一化时，所述模板为预设的统一元数据模板，映射时采用的映射方案为根据多个数据中心之间元数据的差异建立的多个不同的映射方案。

进一步地，步骤S104中，通过solr数据库创建元数据索引，以为用户提供对元数据的查询检索服务时，针对遥感影像元数据的多维度特点，通过倒排索引的方法构建对元数据多维度字段的倒排索引，并根据构建的倒排索引，利用搜索引擎实现对大量元数据的快速检索。