[发明专利]一种实现雾霾在线监测的大数据处理方法

摘要

本发明公开一种实现雾霾在线监测的大数据处理方法，包括步骤：数据获取：获取粒径数据、谱图数据获取和常规监测数据；谱图数据筛查和校准：将含非法和无效质谱数据的谱图去除，校正含偏差质谱数据的谱图；数据压缩：飞行时间反演出质荷比，得到质荷比与信号强度组成的数组，对每一个质荷比附近谱峰信号强度进行积分得到该质荷比下的信号强度；数据打包上传：各类数据整合并打包上传服务器；结构化存储与管理：上传数据归类存储于服务器的数据库；多元数据整合挖掘：整合与粒径数据、谱图数据及常规监测数据相关联的其他数据。本发明提高对质谱仪海量数据的处理能力和对多元数据的综合利用能力，为数据深度挖掘和分析提供有力工具。

主权项

1.一种实现雾霾在线监测的大数据处理方法，其特征在于，包括以下步骤：S1.数据获取：通过质谱仪获取粒径数据和谱图数据，根据粒径数据和谱图数据分析出雾霾的化学组分数据，通过辅助检测仪和传感器中获取常规监测数据；S2.数据筛查和校准：将含有非法和无效质谱数据的谱图去除，校正含有偏差质谱数据的谱图；S3.数据压缩：通过飞行时间反演出质荷比，得到质荷比与信号强度组成的数组，对每一个质荷比附近谱峰的信号强度进行积分得到该质荷比下的信号强度，取该信号强度作为压缩后的谱图数据；S4.数据打包上传：将粒径数据、压缩后的谱图数据和常规监测数据整合，并打包实时地上传至服务器作分批连续处理；S5.结构化存储与管理：将上传的粒径数据、谱图数据及常规监测数据归类存储于服务器的数据库中，并依据设定的机制分别对粒径数据、谱图数据及常规监测数据建立关联性索引；S6.多元数据整合挖掘：整合与粒径数据、谱图数据及常规监测数据相关联的其他数据，然后将粒径数据、谱图数据及常规监测数据与关联数据比对，进行多元信息的整合挖掘；所述其他数据包括PM2.5常规数据、仪器参数和环境参数，其中，仪器参数包括仪器状态参数和仪器位置参数；环境参数包括温度、湿度、气压。