[发明专利]一种数据流决策树分类中的缺失值处理方法在审

专利信息
申请号: 201410295212.7 申请日: 2014-06-25
公开(公告)号: CN104035779A 公开(公告)日: 2014-09-10
发明(设计)人: 吕品;侯旭珊 申请(专利权)人: 中国科学院软件研究所
主分类号: G06F9/44 分类号: G06F9/44
代理公司: 北京科迪生专利代理有限责任公司 11251 代理人: 成金玉;孟卜娟
地址: 100190 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 数据流 决策树 分类 中的 缺失 处理 方法
【权利要求书】:

1.一种数据流决策树分类中的缺失值处理方法,其特征在实现步骤如下:

步骤1:读取数据流中的数据样本,并使用固定容量的滑动窗口W保存最新到达的数据样本;

步骤2:当前数据样本中的属性Xi存在缺失值时,建立或更新属性Xi对应的缺失处理器,若属性Xi的缺失处理器已存在,则跳至步骤4更新缺失处理器,否则进入步骤3建立缺失处理器;

步骤3:计算滑动窗口W中同类样本关于属性Xi的标准差σ(Xi),若σ(Xi)不超过阈值σm,则选择使用众数或平均值代替缺失值,否则建立子分类器来预测缺失值,根据此方法建立缺失处理器并跳至步骤5;

步骤4:计算缺失处理器的加权总错误率E,若E超过阈值β,则选择权重最大且错误率ei>β*的缺失处理器进行更新,直到E低于阈值β;

步骤5:利用缺失处理器补充属性Xi的缺失值,得到完整的数据样本;

步骤6:依据Hoeffding决策树分类方法训练完整的数据样本,动态地构造决策树模型,并根据决策树分裂叶子节点时的属性度量值为每个属性Xi更新权重;

步骤7:返回数据流决策树分类结果。

2.根据权利要求1所述一种数据流决策树分类中的缺失值处理方法,其特征在于:所述步骤3中计算滑动窗口W中同类样本关于属性Xi的标准差σ(Xi)的方法为:

对于s个数据样本,数据属性X={X1,X2,...,Xn},令xij表示属性Xi在第j个样本中的属性值,当属性Xi为离散属性时,样本标准差σ(Xi)为:

σ(Xi)=1s-1Σj=1sdiff(xij,Mi),]]>

diff(xij,Mi)=1(xijMi)0(xij=Mi),]]>

其中,Mi表示属性Xi在计算样本中属性值的众数;当属性Xi为连续属性时,样本标准差σ(Xi)为:

σ(Xi)=1s-1Σj=1s(xij-μi)2,]]>

μi=Σj=1sxij,]]>

其中,μi表示属性Xi在计算样本中属性值的平均值。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院软件研究所,未经中国科学院软件研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201410295212.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top