[发明专利]一种基于数据融合的大气生态环境分析方法

说明书

本发明提供了一种基于数据融合的大气生态环境分析方法，包括对大气环境的大气环境数据的采集、治理的方法和任务监控模式；信息资源目录的分类编制管理，公共属性、元数据、标准表的管理；数据资源的管理模式，质量监控规则设计方法；大气环境数据健康度的诊断，数据集市的设计，数据分析研判方案。本发明融合业务系统数据库、数据中心、网络、应用系统、终端、传感器的数据源数据，通过数据治理，数据目录、数据资源的管理，生成大气环境数据的展示云图和未来发展趋势的分析研判报告，帮助生态环境部门及时有效掌握城市大气生态现状。

技术领域

本发明属于大气生态环境保护技术领域，特别涉及一种基于数据融合的大气生态环境分析方法。

背景技术

随着社会经济的快速发展，人口急剧增加，能源消耗飞速增长，大气环境形势日趋严峻，当大气环境中的污染物呈现足够浓度、达到足够时间，就会对人体健康、工农业生产、大气和气候带来严重危害。

为了使有关生态环境部门对将来可能的环境质量发展趋势做出准确的判断和预测，采用有效的大气生态环境监测及分析方法势在必行，不但可以大气环境数据监测节点的重复建设，使环境信息资源能够被有效利用，还可以为城域物联感知平台提供环境信息资源的信息共享，以利于政府各部门对环境状况及时做出合理的决策。

发明内容

发明目的：为了解决数据标准不统一、数据源分散、数据融合性低的问题，提供一种基于数据融合的大气生态环境分析方法。

技术方案：一种基于数据融合的大气生态环境分析方法，包括以下步骤：

包括以下步骤：

步骤1，进行大气环境数据的采集、治理和任务的监控；

步骤2，进行数据资源目录分类，以及公共属性、元数据、标准表管理；

步骤3，进行数据资源管理与质量监控；

步骤4，进行大气环境数据的分析研判。

步骤1包括：

步骤1-1，配置大气生态各各业务系统表的源数据，制定如下规则抽取大气环境质量业务数据：通过数据交换区和批量导入的方式，上传时效性要求较低的数据；通过数据实时接入接口，实时同步时效性要求较高的数据；通过关系型数据采集集群采集数据源中的结构化数据，通过业务系统ETL(数据仓库技术，Extract-Transform-Load) 技术采集数据源中的非结构化数据；

步骤1-2，将需要校验的源数据字段注册到唯一性校验规则表中，使用shell脚本md5校验方法对抽取的源数据接口文件、相关记录进行唯一性检查；对字段类型、字段长度、数字精度、取值范围、可否为空、忽略字符、正则表达式一致性等内容开展记录级校验；

步骤1-3，定义异构数据源的处理流程，设置统一类型格式、完整性规则、准确性规则，将源数据转换为目标数据，并录入大气环境信息资源库，包括：将来源于不同业务系统的相同类型的数据进行统一处理，如时间、数值、字符、计量单位等内容，确保类型格式统一；按照数据仓库粒度对数据进行统一归整、对空值进行替换配置，确保数据完整性；将源数据转换为目标数据，并录入大气环境信息资源库，确保数据准确性；

步骤1-4，展示当前自定义数据处理流程的实时监控情况，包括完成、运行中、运行失败状态，当状态异常时自动报警。

步骤2包括：

步骤2-1，进行分类编目和分级管理；

步骤2-2，进行环境信息公共属性管理；

步骤2-3，进行元数据管理；

步骤2-4，进行标准表管理。