[发明专利]提高目标数据准确性的数据清洗方法及清洗系统无效
申请号: | 200810149035.6 | 申请日: | 2008-09-18 |
公开(公告)号: | CN101676900A | 公开(公告)日: | 2010-03-24 |
发明(设计)人: | 徐建军;向继新 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 上海开祺知识产权代理有限公司 | 代理人: | 费开逵 |
地址: | 英属开曼群岛大开曼*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 一种提高目标数据准确性的数据清洗方法,包括:(1)从数据源中找到与所述目标数据相关的若干原始字段项A1,A2...An;(2)建立逻辑处理模型:目标数据量=f(M1(q1,G1(A1)),M2(q2,G2(A2)),...Mn(qn,Gn(An)))其中,A1,A2...An分别为原始字段项,G1(A1)、G2(A2)...Gn(An)分别为反映每一原始字段项中数据属性的属性函数,q1,q2...qn为每一原始字段项的权重值;M1(q1,G1(A1),M2(q2,G2(A2))..Mn(qn,Gn(An))为影响目标数据值的每一原始字段分值的影响函数,f()为根据每一影响函数确定目标数据值的确定函数;(3)在每一次数据清洗时,找到所有的原始字段项,根据逻辑处理模型确定目标数据的数值。本发明能够提高从数据源中清洗出来的目标数据的准确性。 | ||
搜索关键词: | 提高 目标 数据 准确性 清洗 方法 系统 | ||
【主权项】:
1、一种提高目标数据准确性的数据清洗方法,用以提高从数据源中清洗出来的目标数据的准确性,其特征在于,包括以下步骤:(1)从数据源中找到与所述目标数据相关的若干原始字段项A1,A2...An;(2)建立逻辑处理模型:(21)根据每一原始字段项中影响目标数据的因素大小确定每一原始字段项的权重值q1,q2...qn;(22)确定该目标数据值的逻辑处理模型:目标数据量=f(M1(q1,G1(A1)),M2(q2,G2(A2)),...Mn(qn,Gn(An)))其中,A1,A2...An分别为原始字段项,G1(A1)、G2(A2)...Gn(An)分别为反映每一原始字段项中数据属性的属性函数,q1,q2...qn为每一原始字段项的权重值;M1(q1,G1(A1),M2(q2,G2(A2))..Mn(qn,Gn(An))为影响目标数据值的每一原始字段分值的影响函数,f()为根据每一影响函数确定目标数据值的确定函数;(3)在每一次数据清洗时,找到所有的原始字段项,根据逻辑处理模型确定目标数据的数值。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/200810149035.6/,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置