[发明专利]数据快速清理方法

摘要

本发明公开了一种数据快速清理方法,包含在线数据的清理、在线描述数据文件的有序化处理、离线数据清理、离线描述数据文件的有序化处理、数据再编码和冗余数据清除这些步骤。本发明的数据快速清理方法将在线数据和离线数据分开分别处理，将待处理数据分批存储在网络数据库中，通过对描述数据文件的有序标识实现对基础数据文件的有序存储，同时在整理数据的同时还对基础数据文件和描述数据文件进行验证，删除不需要的数据，从而优化数据环境，也大大提高了数据的清理效率。

主权项

一种数据快速清理方法，其特征在于，包含如下步骤：①在线数据的清理：将在线数据作为目标数据导入多个在线数据库，将在线数据进行标记识别，分为基础数据文件和描述数据文件，通过对描述数据文件进行数据验证，进而实现对基础数据文件的验证；②在线描述数据文件的有序化处理：将基础数据文件对应的描述数据文件创建文件名，文件名为十六进制编码，十六进制编码的文件名末尾设置四个数位用于标记描述数据文件所在数据库中的位置；③离线数据清理：将离线数据作为目标数据导入多个网络数据库，将数据库中的离线数据进行标记识别，分为基础数据文件和描述数据文件，通过对描述数据文件进行数据验证，进而实现对基础数据文件的验证；④离线描述数据文件的有序化处理：将基础数据文件对应的描述数据文件创建文件名，文件名为十六进制编码，十六进制编码的文件名末尾设置四个数位用于标记描述数据文件所在数据库中的位置；⑤数据再编码：将离线、在线描述数据文件按由小到大或由大到小的顺序排序并将描述数据文件对应的基础数据文件进行网络数据库位排序，使得具有相同或相应网络存储位置的基础数据文件优化存储单元；⑥冗余数据清除：通过多数据库同时处理的方法对各个网络数据库内的基础数据文件和对应的描述数据文件进行数据验证，重复、过期、错误数据及时清除并做清理历史标记。