[发明专利]一种数据清洗方法及设备在审
申请号: | 201810790545.5 | 申请日: | 2018-07-18 |
公开(公告)号: | CN108959620A | 公开(公告)日: | 2018-12-07 |
发明(设计)人: | 胡晓娇;耿凌;曾会成;石建豪;付宏东;李玺 | 申请(专利权)人: | 上海汉得信息技术股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 上海百一领御专利代理事务所(普通合伙) 31243 | 代理人: | 王奎宇;甘章乖 |
地址: | 201799 上海市青浦区*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请的目的是提供一种数据清洗方法,本申请首先预置数据清洗规则,其中,该数据清洗规则包括数据类型、字段及其对应的清洗转换规则,以便需要对不同行业或企业对应的不同的原始数据进行数据清洗时,能够直接调用该数据清洗规则对对应的原始数据进行及时有效地清洗;当获取待清洗的原始数据及其所有原始字段后,对所述待清洗的原始数据及其所有原始字段进行预处理,得到待清洗数据及其至少一个有效地清洗字段;基于数据清洗规则对待清洗数据中的、每个清洗字段对应的数据进行清洗,得到清洗后的数据,其中,清洗后的数据包括每个清洗字段的清洗值,实现对不同的原始数据中预处理筛选出来的清洗字段及时、定向及有效地清洗。 | ||
搜索关键词: | 清洗 字段 数据清洗 原始数据 有效地清洗 预处理 数据包括 数据类型 预置数据 直接调用 转换规则 申请 筛选 | ||
【主权项】:
1.一种数据清洗方法,其中,所述方法包括:预置数据清洗规则;获取待清洗的原始数据及其所有原始字段;对所述待清洗的原始数据及其所有原始字段进行预处理,得到待清洗数据及其至少一个清洗字段;基于所述数据清洗规则对所述待清洗数据中的、每个所述清洗字段对应的数据进行清洗,得到清洗后的数据,其中,所述清洗后的数据包括每个所述清洗字段的清洗值。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海汉得信息技术股份有限公司,未经上海汉得信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810790545.5/,转载请声明来源钻瓜专利网。