[发明专利]挥发性有机物观测数据中缺省值的修复方法及装置有效
申请号: | 202010701051.2 | 申请日: | 2020-07-20 |
公开(公告)号: | CN111860645B | 公开(公告)日: | 2021-04-13 |
发明(设计)人: | 樊旭;吴剑斌;陈焕盛;晏平仲;秦东明;王文丁;梁倩;杨佩霖;肖林鸿 | 申请(专利权)人: | 中科三清科技有限公司 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/08 |
代理公司: | 北京辰权知识产权代理有限公司 11619 | 代理人: | 刘广达 |
地址: | 100193 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 挥发性 有机物 观测 数据 缺省值 修复 方法 装置 | ||
1.一种挥发性有机物观测数据中缺省值的修复方法,其特征在于,包括:
利用挥发性有机物历史观测数据分别对自编码神经网络和循环门控神经网络进行训练;
判断单一时次挥发性有机物观测数据的缺省值所属的类型;
若所述缺省值属于零星缺省类型,则依次通过均值修复法和训练好的自编码神经网络对所述缺省值进行修复;
若所述缺省值属于系统性缺省类型,则利用训练好的循环门控神经网络对所述缺省值进行修复;
所述利用挥发性有机物历史观测数据分别对自编码神经网络和循环门控神经网络进行训练,包括:
获取一段时间的挥发性有机物历史观测数据;
通过百分位阈值法,确定挥发性有机物历史观测数据中各组分浓度数据的异常阈值和正常数据;其中,异常阈值包括异常高值阈值和异常低值阈值;
利用所述正常数据构建训练数据集,通过所述训练数据集分别对自编码神经网络和循环门控神经网络进行训练;
所述判断单一时次挥发性有机物观测数据的缺省值所属的类型,包括:
若所述单一时次挥发性有机物观测数据中,存在缺省值的组分种类数量小于等于组分种类总数量的预设占比阈值,则确定所述缺省值属于零星缺省类型;
否则,确定所述缺省值属于系统性缺省类型;
所述依次通过均值修复法和训练好的自编码神经网络对所述缺省值进行修复,包括:
利用均值修复法获得所述缺省值的初始填补值;
利用训练好的自编码神经网络对所述初始填补值进行优化处理得到优化填补值;
利用所述优化填补值填补所述缺省值;
所述利用均值修复法获得所述缺省值的初始填补值,包括:
从所述单一时次挥发性有机物观测数据中查找出所述缺省值所属日期之前若干天中与所述缺省值时次相同的观测数据;
计算所有所述与所述缺省值时次相同的观测数据的平均值,利用所述平均值作为所述缺省值的初始填补值;
所述利用训练好的循环门控神经网络对所述缺省值进行修复,包括:
判断所述缺省值是否位于连续时次缺省值序列中;
若否,则将所述缺省值前若干个时次的观测数据输入到训练好的循环门控神经网络中进行处理,得到所述缺省值的修复值;
若是,则利用训练好的循环门控神经网络对所述连续时次缺省值序列中的各缺省值按照时次顺序进行修复;
所述利用训练好的循环门控神经网络对所述连续时次缺省值序列中的各缺省值按照时次顺序进行修复,包括:
针对所述连续时次缺省值序列中时次顺序上的第一个缺省值,将所述第一个缺省值前若干个时次的观测数据输入到所述训练好的循环门控神经网络中,输出所述第一个缺省值的修复值;
利用所述第一个缺省值的修复值填补所述第一个缺省值;
采用修复所述第一个缺省值的方法,按照时次顺序对所述连续时次缺省值序列中剩余的缺省值进行修复,直至所述剩余的缺省值均修复完成为止。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中科三清科技有限公司,未经中科三清科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010701051.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置