[发明专利]无索引表格数据比对方法、装置、计算机设备及存储介质在审
申请号: | 202211000133.X | 申请日: | 2022-08-19 |
公开(公告)号: | CN115454999A | 公开(公告)日: | 2022-12-09 |
发明(设计)人: | 王仲沅;柳遵梁 | 申请(专利权)人: | 杭州美创科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2458;G06F16/2457 |
代理公司: | 杭州知学知识产权代理事务所(普通合伙) 33356 | 代理人: | 张雯 |
地址: | 310011 浙江省杭州市拱墅*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 索引 表格 数据 方法 装置 计算机 设备 存储 介质 | ||
1.无索引表格数据比对方法,其特征在于,包括:
配置比对计划;
根据所述比对计划查询数据库表格元数据,确定每张表格参与比对的字段列表;
抽取所述表格元数据,并存储于内存内;
对所述内存内的每一行数据生成指纹,并存储于设定存储介质内;
对所述设定存储介质内的指纹进行排序,以得到排序结果;
获取所述排序结果内的指纹并进行比对,以得到比对结果。
2.根据权利要求1所述的无索引表格数据比对方法,其特征在于,所述比对计划包括数据库连接信息、数据比对的表格级别以及表格字段的映射关系,数据比对的表格级别包括数据库级别、用户级别以及表格级别。
3.根据权利要求2所述的无索引表格数据比对方法,其特征在于,所述根据所述比对计划查询数据库表格元数据,确定每张表格参与比对的字段列表,包括:
根据数据库连接信息获取数据库字典;
根据所述数据库字典获取相应表格的元数据;
根据表格字段的映射关系以及相应表格的元数据生成需要比对的字段列表以及映射关系,以得到每张表格参与比对的字段列表。
4.根据权利要求1所述的无索引表格数据比对方法,其特征在于,所述对所述内存内的每一行数据生成指纹,并存储于设定存储介质内,包括:
将对所述内存内的不同数据库的同一类型数据进行归一化,以得到归一化结果;
根据指纹算法对所述归一化结果进行计算,生成指纹;
将所述元数据以及指纹存入设定存储介质中。
5.根据权利要求1所述的无索引表格数据比对方法,其特征在于,所述对所述设定存储介质内的指纹进行排序,以得到排序结果,包括:
获取所述设定存储介质内的每个表格对应的文件列表;
对所述文件列表中的所有指纹进行排序,以得到排序结果;
将排序结果存放至新的目录,删除原有文件。
6.根据权利要求5所述的无索引表格数据比对方法,其特征在于,所述对所述文件列表中的所有指纹进行排序,以得到排序结果,包括:
对所述文件列表中的所有指纹进行多路归并排序,以得到排序结果。
7.无索引表格数据比对装置,其特征在于,包括:
配置单元,用于配置比对计划;
确定单元,用于根据所述比对计划查询数据库表格元数据,确定每张表格参与比对的字段列表;
抽取单元,用于抽取所述表格元数据,并存储于内存内;
指纹生成单元,用于对所述内存内的每一行数据生成指纹,并存储于设定存储介质内;
排序单元,用于对所述设定存储介质内的指纹进行排序,以得到排序结果;
比对单元,用于获取所述排序结果内的指纹并进行比对,以得到比对结果。
8.根据权利要求7所述的无索引表格数据比对装置,其特征在于,所述确定单元包括:
字典获取子单元,用于根据数据库连接信息获取数据库字典;
元数据获取子单元,用于根据所述数据库字典获取相应表格的元数据;
字段确定子单元,用于根据表格字段的映射关系以及相应表格的元数据生成需要比对的字段列表以及映射关系,以得到每张表格参与比对的字段列表。
9.一种计算机设备,其特征在于,所述计算机设备包括存储器及处理器,所述存储器上存储有计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至6中任一项所述的方法。
10.一种存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州美创科技有限公司,未经杭州美创科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211000133.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置