[发明专利]一种数据快速迁移方法及装置

说明书

本发明提出了一种数据快速迁移方法及装置；其中，方法包括：通过SQLite数据库对接目标系统；获取目标数据库的根页号以及表的字段结构信息；基于根页号遍历目标数据库以收集其中所有的空闲页与空闲块；根据获取到的字段结构信息确定目标数据库中最小的有效数据长度，并基于最小的有效数据长度对获得的空闲页与空闲块进行快速筛选；对通过筛选的空闲页与空闲块进行数据迁移。本发明利用SQLite数据库作为承载迁移数据的数据库，大大降低了数据迁移的前期的准备工作以及数据迁移过程中的管理工作；以及通过确定最小的有效数据长度来实现对目标数据库中的分布式数据的筛选，有效提升了对无效数据的处理速度，从而大大提升了数据迁移效率。

技术领域

本发明涉及计算机的数据迁移领域，由于涉及一种数据快速迁移方法及装置。

背景技术

伴随着通讯技术的日新月异、社会分工的专业化拓展，人际沟通和社会关系呈现出系统化、网络化和精细化的主流趋势，对服务器的数据容量需求越来越大，数据的恢复迁移日益成为该领域当前突出的问题。如何快速的实现数据迁移成为当前一个研究热点和难点。具体来讲，在数据迁移过程中，数据库中存在大量的空闲页与空闲块，这些空闲页与空闲块中可能存储有有价值的数据，而对这些空闲页与空闲块中的有价值的数据的提取将花费大量的时间。

因此，如何简单、快速的实现对空闲页与空闲块的处理以快速的完成数据迁移是本领域中亟需解决的技术问题。

发明内容

为了更加简单且快速的完成对目标数据库的数据迁移工作。在本发明的一个方面，提出了一种数据快速迁移方法，所述方法包括：通过SQLite数据库(一款轻型的数据库，是遵守ACID的关系型数据库管理系统，它包含在一个相对小的C库中)对接目标系统；获取目标数据库的根页号以及表的字段结构信息；基于所述根页号遍历目标数据库以收集其中所有的空闲页与空闲块；根据获取到的字段结构信息确定所述目标数据库中最小的有效数据长度，并基于所述最小的有效数据长度对获得的空闲页与空闲块进行快速筛选；对通过筛选的空闲页与空闲块进行数据迁移。

在一个或多个实施中，所述SQLite数据库为嵌入式SQLite数据库，所述利用SQLite数据库对接目标系统包括：将预设的数据迁移程序嵌入到所述目标系统中；响应于所述目标系统执行所述数据迁移程序，将所述嵌入式SQLite数据库加入到所述目标系统中。

在一个或多个实施中，所述根据获取到的字段结构信息确定所述目标数据库中最小的数据长度，包括：确定所述字段结构信息中占用字节长度最短的有效表字段组合；以所述最短的有效表字段组合所占用的字节长度作为最小的有效数据长度。

在一个或多个实施中，所述基于所述最小的有效数据长度对获得的空闲页与空闲块进行快速筛选，包括：响应于所述空闲页与空闲块所占用的字节长度小于所述最小的有效数据长度，跳过对所述空闲页与空闲块的数据提取。

在一个或多个实施中，所述对通过筛选的空闲页与空闲块进行数据迁移，包括：确定所述空闲页与空闲块中的表字段的Type起始位；按照Type的可变长整型存储规则，确定Type的理论长度；基于所述表字段的Type起始位以及以及对应Type的理论长度，将所述空闲页和空闲块中的对应数据保存到所述嵌入式SQLite数据库中。

在本发明的第二方面，提出了一种数据快速迁移装置，包括：对接模块，配置用于通过SQLite数据库对接目标系统；识别模块，配置用于获取目标数据库的根页号以及表的字段结构信息；收集模块，配置基于所述根页号遍历目标数据库以收集其中所有的空闲页与空闲块；筛选模块，配置用于根据获取到的字段结构信息确定所述目标数据库中最小的有效数据长度，并基于所述最小的有效数据长度对获得的空闲页与空闲块进行快速筛选；以及迁移模块，配置用于对通过筛选的空闲页与空闲块进行数据迁移。