[发明专利]数据表的处理方法和装置有效
申请号: | 201610197071.4 | 申请日: | 2016-03-31 |
公开(公告)号: | CN107291672B | 公开(公告)日: | 2020-11-20 |
发明(设计)人: | 纪丽娟 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F40/194 | 分类号: | G06F40/194 |
代理公司: | 北京博浩百睿知识产权代理有限责任公司 11134 | 代理人: | 宋子良 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据表 处理 方法 装置 | ||
本申请公开了一种数据表的处理方法和装置。其中,该方法包括:比较第一数据表中的第一字段和第二数据表中的第二字段;在比较出第一字段和第二字段的标识信息出现差异的情况下,获取第一字段的加工信息和第二字段的加工信息,其中,加工信息用于记录对应字段的加工路径中的多个加工逻辑;按照加工路径,比较各个对应字段的各个加工逻辑;若当前比对的加工逻辑不一致,则确定当前比对的加工逻辑为出现差异的逻辑。本申请解决了进行数据表内容比对时效率低的技术问题。
技术领域
本申请涉及数据处理领域,具体而言,涉及一种数据表的处理方法和装置。
背景技术
现有技术中,在比对数据表时,是直接做数据内容的比对,当发现内容有差异后,要通过人工沿着加工环节向上查,来定位错误。
在发现内容差异之后,人工发现差异之后,需要人工获取发生差异的数据,并沿着发生差异的数据的加工环节,一节一节向上查,逐个环节的比对,以定位错误。在这个过程中,由于大量的比对任务,人工操作比较繁重,而且人工操作的过程,出错率较高。
针对上述的进行数据表内容比对时效率低的问题,目前尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种数据表的处理方法和装置,以至少解决进行数据表内容比对时效率低的问题。
根据本申请实施例的一个方面,提供了一种数据表的处理方法,该方法包括:比较第一数据表中的第一字段和第二数据表中的第二字段;在比较出第一字段和第二字段的标识信息出现差异的情况下,获取第一字段的加工信息和第二字段的加工信息,其中,加工信息用于记录对应字段的加工路径中的多个加工逻辑;按照加工路径,比较各个对应字段的各个加工逻辑;若当前比对的加工逻辑不一致,则确定当前比对的加工逻辑为出现差异的逻辑。
根据本申请实施例的另一方面,还提供了一种数据表的处理装置,该装置包括:第一比较单元,用于比较第一数据表中的第一字段和第二数据表中的第二字段;信息获取单元,用于在比较出第一字段和第二字段的标识信息出现差异的情况下,获取第一字段的加工信息和第二字段的加工信息,其中,加工信息用于记录对应字段的加工路径中的多个加工逻辑;第二比较单元,用于按照加工路径,比较各个对应字段的各个加工逻辑;差异定位单元,用于若当前比对的加工逻辑不一致,则确定当前比对的加工逻辑为出现差异的逻辑。
进一步地,所述装置还包括:字段确定单元,用于获取第一字段的标识信息,确定所述第二数据表中与所述第一字段有相同的标识信息的第二字段。
进一步地,所述标识信息包括:字段名称,其中,所述第一比较单元包括:第一比较模块,用于比较所述第一字段与所述第二字段的字段名称是否相同;第一差异确定模块,用于若所述第一字段和所述第二字段的字段名称不同,则比较出所述第一字段和所述第二字段的标识信息出现差异。
进一步地,所述标识信息包括字段元数据和加工逻辑,其中,所述第一比较单元包括:第二比较模块,用于比较所述第一字段与所述第二字段的字段元数据和加工逻辑是否相同;第二差异确定模块,用于若所述第一字段和所述第二字段的字段元数据和加工逻辑不同,则比较出所述第一字段和所述第二字段的标识信息出现差异。
进一步地,所述装置还包括:信息获取单元,用于在比较第一数据表中的第一字段和第二数据表中的第二字段之前,获取待分析数据表中每个数据表的各个字段的加工信息;判断单元,用于利用所述加工信息中的加工逻辑,判断所述各个字段是否为标识信息相同的字段,得到判断结果;统计单元,用于按照所述判断结果统计所述待分析数据表中两两数据表之间拥有标识信息相同的字段的个数;计算单元,用于基于所述个数,计算所述两两数据表的相似度;表获取单元,用于获取与所述第一数据表的相似度符合预设相似度条件的多个第二数据表。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610197071.4/2.html,转载请声明来源钻瓜专利网。