[发明专利]一种海量文件快速合成备份方法

说明书

技术领域

本发明涉及计算机技术领域，具体涉及一种海量文件快速合成备份方法。

背景技术

合成备份是指将存储介质中完全备份数据和增量备份数据通过某种算法合并，生成一个新的完全备份数据，但这种合成备份消耗时间与需要合并的数据量成正比，占用大量存储器资源，当遇到海量备份数据时，备份速度低。

增量备份是指在一次文件全备份或上一次文件增量备份后，以后每次的备份只需备份与前一次相比增加或者被修改的文件。这就意味着，第一次增量备份的对象是进行完全备份后所产生的增加或修改的文件；第二次增量备份的对象是进行第一次增量备份后所产生的增加或修改的文件，如此类推。因此，在第二次增量备份后，第一次增量备份后所产生的备份文件就成为了过期数据，第二次增量备份后所产生的备份文件是最新未过期数据。

举例说明：对一个文件集完全备份数据中的文件1，进行了3次增量备份：

第一次文件1未变化，此时的增量备份数据是0，即不进行增量备份；

第二次文件1变化，此时的增量备份数据标记为文件1-1；

第三次文件1变化，此时的增量备份数据标记为文件1-2；

此时如果进行合成备份，将会获取文件1最新记录，文件1-1就是这个增量备份链中的过期数据；文件1-2就是这个增量备份链中的未过期数据。

通过将存储介质上待合成的增量备份数据中的未过期数据追加到完全备份数据中，以减少完全备份数据的移动，加快备份速度，同时节省存储介质空间；将存储介质中增量备份数据移动写入到完全备份数据中，以生成最新合成备份数据；在这种合成备份过程中，增量备份数据的“追加写入”移动操作，如果在海量数据应用环境下，随着增量数据量的增长，虽只涉及增量数据的移动，也将会对备份的整体备份速度造成影响。

发明内容

为解决现有技术中的不足，本发明提供一种基于索引库的海量数据快速合成备份方法，解决了海量数据下增量备份文件数据的写移动操作导致备份速度低的问题。

为了实现上述目标，本发明采用如下技术方案：一种海量文件快速合成备份方法，包括步骤：

1)利用数据库技术搭建索引库，将索引库与存储介质中的完全备份、增量备份数据对应起来；

2)触发指定的备份源数据进行完全或增量备份：

一次完全备份开始时，在索引库中新建完全备份时间戳索引表；将文件数据备份至存储介质服务器中的同时，将文件数据备份存储信息记录到索引库的完全备份时间戳索引表中；

一次增量备份开始时，在索引库中查询最新时间戳索引表，找到当前需要备份文件在索引表中的未过期文件记录，如果当前需要备份文件的修改时间比索引表中该文件的未过期文件记录的时间较新，表明当前需要备份文件已经修改，则将文件数据备份至介质服务器对应备份集数据中，并将文件相关索引信息，记录到索引库的最新时间戳索引表中；

3)触发指定的备份源数据合成备份：

一次合成备份开始时，查询索引库，找到最新时间戳索引表组成当前时间前最新备份链，将每个文件对应的最新未过期备份记录集合生成合成备份时间戳索引表；合成备份后，除非再次执行完全备份，否则执行的增量备份记录记载在最新合成备份时间戳索引表中；

4)备份恢复时通过查询索引库，找到需要恢复备份时间对应的索引表，根据索引表中文件数据在存储介质服务器备份集中信息，直接从存储介质服务器中对应的备份集读取数据恢复。

前述的一种海量文件快速合成备份方法，其特征是：所述时间戳索引表包括记录：文件名、文件大小、文件修改时间、文件数据在存储介质服务器备份集中的偏移地址、文件数据在存储介质服务器备份集中的长度、备份时间点。

前述的一种海量文件快速合成备份方法，其特征是：所述触发方式包括定时触发方式和人为触发方式。

前述的一种海量文件快速合成备份方法，其特征是：所述最新备份链为最近一次完全或合成备份到当前时间期间的所有最新未过期备份记录集合。

前述的一种海量文件快速合成备份方法，其特征是：所述时间戳索引表以当前时间生成备份时间戳，并以备份时间戳命名。

前述的一种海量文件快速合成备份方法，其特征是：所述文件数据在存储介质服务器备份集中信息包括文件数据在存储介质服务器备份集中的偏移地址、文件数据在存储介质服务器备份集中的长度。