[发明专利]基于KMDB的软测量建模数据异常点检测方法有效
申请号: | 201510157690.6 | 申请日: | 2015-04-03 |
公开(公告)号: | CN104715160B | 公开(公告)日: | 2017-12-12 |
发明(设计)人: | 田慧欣;韩梅 | 申请(专利权)人: | 天津工业大学 |
主分类号: | G06F19/00 | 分类号: | G06F19/00 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 300387 *** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 kmdb 测量 建模 数据 异常 检测 方法 | ||
1.一种基于KMDB的软测量建模数据异常点检测方法,其特征在于包含有以下步骤:
(1)设定异常点比例p0与误差比较系数t;
(2)确定样本数据集,计算用该数据集进行软测量建模的建模测试误差e0;
(3)根据误差使用公式(1)计算K值并对数据集聚类,将数据集划分为K类:
式中:K0=1,为向上取整符号,为向下取整符号,e为相对误差,i=0,1,2,....,N,N为迭代次数;
(4)调节Eps和MinPts,用DBSCAN算法进行局部聚类,不属于任何簇的点即为异常点;这里MinPts和Eps的初值根据不同的数据集依赖经验设定;
(5)合并各局部聚类结果,判断异常样本占总样本的比例p是否小于设定值p0:
若p<p0,进行下一步,
若p≥p0,依据异常样本占总样本的比例值p,调整MinPts和Eps的大小:
返回步骤(4),式中j=1,2,....;
(6)将删除异常点以后的数据划为正确数据,将正确数据作为建模数据进行软测量建模,得到建模测试误差e,比较e与te0的大小:
若e≤te0,则认为此次异常点检测是有效的,将去除异常点后的数据作为样本数据,
若e>te0,则此次检测为无效,返回步骤(3);
(7)设定算法迭代次数为5000次,若在迭代次数范围内设定条件未达到,需重新选择p0与t,若在迭代次数范围内能达到设定条件,异常点检测结束。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津工业大学,未经天津工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510157690.6/1.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06F 电数字数据处理
G06F19-00 专门适用于特定应用的数字计算或数据处理的设备或方法
G06F19-10 .生物信息学,即计算分子生物学中的遗传或蛋白质相关的数据处理方法或系统
G06F19-12 ..用于系统生物学的建模或仿真,例如:概率模型或动态模型,遗传基因管理网络,蛋白质交互作用网络或新陈代谢作用网络
G06F19-14 ..用于发展或进化的,例如:进化的保存区域决定或进化树结构
G06F19-16 ..用于分子结构的,例如:结构排序,结构或功能关系,蛋白质折叠,结构域拓扑,用结构数据的药靶,涉及二维或三维结构的
G06F19-18 ..用于功能性基因组学或蛋白质组学的,例如:基因型–表型关联,不均衡连接,种群遗传学,结合位置鉴定,变异发生,基因型或染色体组的注释,蛋白质相互作用或蛋白质核酸的相互作用