[发明专利]基于XGBoost模型的数据评估方法、装置、设备及存储介质在审
申请号: | 202110407646.1 | 申请日: | 2021-04-15 |
公开(公告)号: | CN112966988A | 公开(公告)日: | 2021-06-15 |
发明(设计)人: | 陈博文;黄隆;柳云鹏;李建伟 | 申请(专利权)人: | 平安直通咨询有限公司上海分公司 |
主分类号: | G06Q10/06 | 分类号: | G06Q10/06;G06Q40/04;G06F16/215 |
代理公司: | 深圳市精英专利事务所 44242 | 代理人: | 涂年影 |
地址: | 200000 上海*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 xgboost 模型 数据 评估 方法 装置 设备 存储 介质 | ||
1.一种基于XGBoost模型的数据评估方法,其特征在于,包括:
从数据源中,获取样本数据;
对所述样本数据进行预处理,得到基础数据,并对所述基础数据按照预设时间段进行切片,得到时间序列数据;
采用XGBoost模型对所述时间序列数据进行特征提取,得到目标特征,并从所述时间序列数据中,获取所述目标特征对应的数据,得到目标数据;
使用所述目标数据对所述XGBoost模型进行迭代计算,并在所述XGBoost模型中使用Hyperopt库进行模型调参,得到训练好的评估模型;
针对任一用户,获取所述用户在交易系统数据库中产生的在线流数据,并从所述在线流数据中获取所述目标特征对应的数据,得到待评估数据;
通过所述训练好的评估模型,对所述待评估数据进行评估处理,得到评估结果。
2.根据权利要求1所述的基于XGBoost模型的数据评估方法,其特征在于,所述采用XGBoost模型对所述时间序列数据进行特征提取,得到目标特征,并从所述时间序列数据中,获取所述目标特征对应的数据,得到目标数据,包括:
通过所述XGBoost模型对所述时间序列数据进行特征提取,得到M个基础特征,其中,M为正整数;
根据逐步回归算法,将M个所述基础特征添加到所述XGBoost模型中进行迭代计算,得到迭代计算结果,其中,所述迭代计算结果中包含所述基础特征对应的贡献分值;
从所述迭代计算结果中,将所述贡献分值按照从大到小的顺序排列,选取排名前N个贡献分值,并将所述前N个贡献分值所对应的基础特征作为N个所述目标特征,其中,NM,N为正整数;
从所述时间序列数据中,获取所述目标特征对应的数据,得到所述目标数据。
3.根据权利要求2所述的基于XGBoost模型的数据评估方法,其特征在于,所述通过所述XGBoost模型对所述时间序列数据进行特征提取,得到M个基础特征,包括:
基于所述XGBoost模型,对所述时间序列数据进行集成树计算分析,得到K个分析特征,其中,所述分析特征经过计算分析后具有分割得分,K为正整数,KM;
删除分割得分为零的分析特征,将保留下来的分析特征作为所述基础特征,得到M个所述基础特征。
4.根据权利要求2所述的基于XGBoost模型的数据评估方法,其特征在于,所述根据逐步回归算法,将M个所述基础特征添加到所述XGBoost模型中进行迭代计算,得到迭代计算结果,包括:
根据所述逐步回归算法,将M个所述基础特征逐步添加到XGBoost模型中进行迭代计算,其中,每次迭代计算都得到一个特征值;
当检测到所述特征值不再上升时,统计所述基础特征对所述XGBoost模型计算后得到的所述贡献分值,得到所述迭代计算结果。
5.根据权利要求1所述的基于XGBoost模型的数据评估方法,其特征在于,所述使用所述目标数据对所述XGBoost模型进行迭代计算,并在所述XGBoost模型中使用Hyperopt库进行模型调参,得到训练好的评估模型,包括:
将所述目标数据按照预设分割比例进行分割,得到训练样本和验证样本;
通过所述训练样本对所述XGBoost模型进行迭代计算,并使用Hyperopt库进行模型调参,得到训练后的XGBoost模型;
通过所述验证样本对所述训练后的XGBoost模型进行验证,得到验证结果;
当所述验证结果大于预设阈值时,停止对所述XGBoost模型进行迭代计算,得到所述训练好的评估模型。
6.根据权利要求1所述的基于XGBoost模型的数据评估方法,其特征在于,所述针对任一用户,获取所述用户在交易系统数据库中产生的在线流数据,并从所述在线流数据中获取所述目标特征对应的数据,得到待评估数据,包括:
接收监测指令;
针对任一所述用户,根据所述监测指令,获取所述用户在交易系统数据库中产生的所述在线流数据;
将所述在线流数据按照所述预设时间段进行切片,得到目标时间序列数据;
从所述目标时间序列数据中,获取所述目标特征对应的数据,得到所述待评估数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安直通咨询有限公司上海分公司,未经平安直通咨询有限公司上海分公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110407646.1/1.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置