[发明专利]一种时空大数据服务系统

说明书

本发明公开了一种时空大数据服务系统包括：数据处理系统和应用服务系统；数据处理系统包括数据接入模块以及数据提取模块；应用服务系统包括AP I网关模块、服务审批模块以及若干微服务模块；数据接入模块在待接入数据为存储在数据库内的数据时，根据待接入数据所在的数据库的名称接入待接入数据；在待接入数据为以文件方式存储的数据时，进行文件摆渡接入待接入数据；在待接入数据为实时数据流时通过Kafka主题推送接入待接入数据；数据提取模块，用于对包含时空属性的已接入数据进行提取；服务审批模块生成审批信息并在接收审批通过指令时生成与访问许可密钥；AP I网关模块，用于调用与访问许可密钥对应的第一微服务模块向用户提供对应的微服务功能。

技术领域

本发明涉及计算机技术领域，尤其涉及一种时空大数据服务系统。

背景技术

时空数据是同时具备有时间和空间维度的数据，一般包括基础时空数据、公共专题数据、物联网感知数据、互联网在线爬取数据。依托以上数据，可以开发出一系列的系统平台来支撑国土空间规划、用途管制、生态修复、土地确权登记等自然资源管理工作。时空数据来源多样，如何对不同数据来源的时空数据进行提取并基于所提取的数据对外提供各种应用服务是一个亟需解决的问题。

发明内容

本发明实施例提供一种时空大数据服务系统，能够对不同来源的时空数据进行数据提取并对外提供各种应用服务。

本发明实施例提供了一种时空大数据服务系统，包括数据处理系统和应用服务系统；所述数据处理系统包括：数据接入模块、数据提取模块及数据组织模块；所述应用服务系统包括：API网关模块、服务审批模块以及若干微服务模块；其中，不同的微服务模块，用于向用户提供不同的微服务功能；

所述数据接入模块，用于在判断所述待接入数据为存储在数据库内的数据时，根据所述待接入数据所在的数据库的名称接入所述待接入数据；在判断所述待接入数据为以文件方式存储的数据时，通过FTP服务器进行文件摆渡接入所述待接入数据；在判断所述待接入数据为实时数据流时，通过Kafka主题推送接入所述待接入数据；

所述数据提取模块，用于对包含时空属性的已接入数据进行提取，生成已提取数据，以使开发者根据所述已提取数据构建各所述微服务模块；

所述数据组织模块，用于对所提取的数据进行分离存储，通过构建各类型数据库融合的数据库将所述提取的数据进行分类存储；所述服务审批模块，用于在接收用户的微服务调用请求时生成审批信息，以使管理人员根据所述审批信息进行调用请求审批，并在接收审批通过指令时生成与访问许可密钥；

所述API网关模块，用于接收访问许可密钥并对所述访问许可密钥进行解析，继而在解析成功后调用与所述访问许可密钥对应的第一微服务模块，向所述用户提供对应的微服务功能。

进一步的，所述数据处理系统，还包括数据接入监测模块；

所述数据接入监测模块，用于获取各所述待接入数据所在数据源的地址信息并实时计算各所述数据源的数据接入总量以及数据接入速率，继而根据各所述数据源的地址信息、各所述数据源的数据接入总量以及各所述数据源的数据接入速率，生成可视化数据地图；其中，所述可视化数据地图用于展示各所述数据源所在的行政区划、各数据源的数据接入总量以及数据接入速率。

进一步的，所述数据处理系统还包括：数据对账模块；所述数据对账模块，用于根据待对账数据的数据条数、数据容量以及数据生成时间生成数据账单。

进一步的，所述数据处理系统还包括：数据清洗模块；所述数据清洗模块，用于对所述已提取数据进行数据过滤、数据去重、格式转换以及坐标转换，生成已清洗数据。

进一步的，所述数据过滤具体包括：

获取预设的数据过滤规则列表；其中，所述数据过滤规则列表中设置有需要进行过滤的数据的字段状态；