[发明专利]污染物预报模型训练方法、装置、电子设备及存储介质有效
申请号: | 202111581442.6 | 申请日: | 2021-12-22 |
公开(公告)号: | CN114282721B | 公开(公告)日: | 2022-12-20 |
发明(设计)人: | 樊旭;陈焕盛;文质彬;柴源;陈婷婷;亢思静;秦东明;肖林鸿;吴剑斌 | 申请(专利权)人: | 中科三清科技有限公司 |
主分类号: | G06Q10/04 | 分类号: | G06Q10/04;G06Q50/26;G06K9/62 |
代理公司: | 北京北汇律师事务所 11711 | 代理人: | 马亚坤 |
地址: | 100193 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 污染物 预报 模型 训练 方法 装置 电子设备 存储 介质 | ||
1.一种污染物预报模型训练方法,其特征在于,包括:
当触发训练任务时,获取预报数据集和原始数据集;其中,所述预报数据集包括第一指定时期内的样本数据;所述原始数据集包括第二指定时期内的样本数据;所述第一指定时期是指触发训练任务的时刻之前的更新周期内的时段;所述第二指定时期长于所述第一指定时期;所述样本数据至少包括污染物预报浓度、污染物观测浓度和气象要素特征数据;
在所述预报数据集中,获取每个污染物预报浓度和对应的污染物观测浓度之间的绝对误差;
根据所述绝对误差,在所述预报数据集中筛选得到大误差数据集,其中,通过设置界限,确定超过所述界限的绝对误差为大误差,根据所述大误差从所述预报数据集中取出与所述大误差相对应的样本数据,进而多个所述大误差对应的样本数据共同形成所述大误差数据集;
对所述大误差数据集进行扩充得到新数据集,并根据所述大误差数据集、所述新数据集和所述原始数据集,获得重构数据集;
根据所述重构数据集对污染物预报模型进行训练,获得更新的污染物预报模型;
当触发预报任务时,将目标污染物观测浓度和目标气象要素特征数据输入所述更新的污染物预报模型进行处理,获得目标污染物预报浓度。
2.根据权利要求1所述的污染物预报模型训练方法,其特征在于,所述根据所述绝对误差,在所述预报数据集中筛选得到大误差数据集,包括:
获取百分位阈值和所述预报数据集包含的样本数量;
根据所述百分位阈值和所述样本数量,确定筛选标记;
将全部绝对误差进行排序,在所述预报数据集中,获取每一个序号大于所述筛选标记的绝对误差对应的样本数据,形成所述大误差数据集。
3.根据权利要求1所述的污染物预报模型训练方法,其特征在于,所述对所述大误差数据集进行扩充得到新数据集,并根据所述大误差数据集、所述新数据集和所述原始数据集,获得重构数据集,包括:
根据所述大误差数据集和所述原始数据集,通过SMOTE算法进行对所述大误差数据集进行扩充,并获取重构数据集。
4.根据权利要求3所述的污染物预报模型训练方法,其特征在于,所述根据所述大误差数据集和所述原始数据集,通过SMOTE算法进行对所述大误差数据集进行扩充,并获取重构数据集,包括:
根据预定规则从所述原始数据集中获取子数据集;
在所述子数据集中,按照邻近算法获取所述大误差数据集中每个样本数据对应的邻近样本数据;
根据所述大误差数据集中每个样本数据与所述邻近样本数据,获取新数据集;
将所述原始数据集、所述大误差数据集以及所述新数据集合并,形成所述重构数据集。
5.根据权利要求4所述的污染物预报模型训练方法,其特征在于,所述根据所述大误差数据集中每个样本数据与所述邻近样本数据,获取新数据集包括:
根据所述大误差数据集中每个样本数据与全部邻近样本数据,获取多个新样本数据,具体如下:
其中,Xnew为新样本数据;Xi为所述大误差数据集中第i个样本数据;为与第i个样本数据对应的邻近样本数据;P为0至1之间的随机数;
将全部新样本数据组合为新数据集。
6.根据权利要求4所述的污染物预报模型训练方法,其特征在于,在所述子数据集中,按照邻近算法获取所述大误差数据集中每个样本数据对应的邻近样本数据,包括:
确定所述大误差数据集中每个样本数据与所述子数据集中任意样本数据之间的欧氏距离;
在所述子数据集中,将欧式距离小于或者等于预定阈值对应的样本数据,作为所述每个样本数据对应的邻近样本数据。
7.根据权利要求1-6中任一所述的污染物预报模型训练方法,其特征在于,所述方法还包括:
对所述目标气象要素特征数据和所述目标污染物预报浓度建立对应关系并进行存储;
当与所述目标污染物预报浓度对应的目标污染物观测浓度完成观测时,对所述目标污染物预报浓度和所述目标污染物观测浓度建立对应关系并进行存储。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中科三清科技有限公司,未经中科三清科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111581442.6/1.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理