[发明专利]污染物预报模型训练方法、装置、电子设备及存储介质有效
申请号: | 202111581442.6 | 申请日: | 2021-12-22 |
公开(公告)号: | CN114282721B | 公开(公告)日: | 2022-12-20 |
发明(设计)人: | 樊旭;陈焕盛;文质彬;柴源;陈婷婷;亢思静;秦东明;肖林鸿;吴剑斌 | 申请(专利权)人: | 中科三清科技有限公司 |
主分类号: | G06Q10/04 | 分类号: | G06Q10/04;G06Q50/26;G06K9/62 |
代理公司: | 北京北汇律师事务所 11711 | 代理人: | 马亚坤 |
地址: | 100193 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 污染物 预报 模型 训练 方法 装置 电子设备 存储 介质 | ||
本发明提供一种污染物预报模型训练方法、装置、电子设备及存储介质。方法包括:当触发训练任务时,获取预报数据集和原始数据集;其中,预报数据集包括第一指定时期内的样本数据;原始数据集包括第二指定时期内的样本数据;在预报数据集中,获取每个污染物预报浓度和对应的污染物观测浓度之间的绝对误差;根据绝对误差,在预报数据集中筛选得到大误差数据集;根据大误差数据集和原始数据集,获得重构数据集;根据重构数据集对污染物预报模型进行训练,获得更新的污染物预报模型;当触发预报任务时,将目标污染物观测浓度和目标气象要素特征数据输入更新的污染物预报模型进行处理,获得目标污染物预报浓度。采用本发明,可以提高污染物预报模型的预报效果。
技术领域
本发明涉及环境气象技术领域,具体涉及一种污染物预报模型训练方法、装置、电子设备及存储介质。
背景技术
近年来,我国大气污染问题已经引起社会高度关注。大气污染物对人体健康、大气能见度以及气候变化等都有重要影响。加紧建设空气质量预报预警体系,提升空气质量预警能力,开展环境空气质量预报是保障及时妥善应对重污染天气的重要技术手段,并且对区域大气污染联防联控也具有指导意义。
目前,主要的大气污染物浓度预报方法有两种:统计预报法和数值预报法。其中,数值预报法在技术和硬件设施上投入大,并且在预报中存在计算资源消耗大,计算速度慢的问题。然而,随着机器学习算法的发展,机器学习算法已经成为实现空气质量短时临近预报的重要方法。大气污染物的浓度受气象条件、本地排放等要素的影响较大,并且气象条件和本地排放情况随时间变化较大,因此算法无法很好的捕捉当下污染物浓度的变化特征,导致预报结果不佳。
针对现有技术中在通过机器学习预报模型进行空气质量预报时,预报结果不佳的问题,还未提出有效的解决方案。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种污染物预报模型训练方法、装置、电子设备及存储介质。技术方案如下:
根据本发明的第一方面,提供了一种污染物预报模型训练方法,所述方法包括:
当触发训练任务时,获取预报数据集和原始数据集;其中,所述预报数据集包括第一指定时期内的样本数据;所述原始数据集包括第二指定时期内的样本数据;所述第一指定时期是指触发训练任务的时刻之前的更新周期内的时段;所述第二指定时期长于所述第一指定时期;所述样本数据至少包括污染物预报浓度、污染物观测浓度和气象要素特征数据;
在所述预报数据集中,获取每个污染物预报浓度和对应的污染物观测浓度之间的绝对误差;
根据所述绝对误差,在所述预报数据集中筛选得到大误差数据集;
根据所述大误差数据集和所述原始数据集,获得重构数据集;
根据所述重构数据集对污染物预报模型进行训练,获得更新的污染物预报模型;
当触发预报任务时,将目标污染物观测浓度和目标气象要素特征数据输入所述更新的污染物预报模型进行处理,获得目标污染物预报浓度。
可选地,所述根据所述绝对误差,在所述预报数据集中筛选得到大误差数据集,包括:
获取百分位阈值和所述预报数据集包含的样本数量;
根据所述百分位阈值和所述样本数量,确定筛选标记;
将全部绝对误差进行排序,在所述预报数据集中,获取每一个序号大于所述筛选标记的绝对误差对应的样本数据,形成所述大误差数据集。
可选地,所述根据所述大误差数据集和所述原始数据集,获得重构数据集,包括:
根据所述大误差数据集和所述原始数据集,通过SMOTE算法获取重构数据集。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中科三清科技有限公司,未经中科三清科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111581442.6/2.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理