[发明专利]一种用于海量数据备份的并行作业备份方法

摘要

本发明公开了一种用于海量数据备份的并行作业备份方法。本方法为：1）选取多台备份节点组成一备份集群，各备份节点具有统一的配置；2）终端选取一备份节点作为备份管理服务器，启动待备份对象的备份策略；3）备份管理服务器选取一备份节点作为作业调度器，逐层获取该备份对象对应的目录结构，每获取一目录生成一扫描作业；4）备份管理服务器将各扫描作业及对应作业路径提交给作业调度器；作业调度器将其发送给备份节点对扫描作业中的目标目录进行扫描；5）该备份管理服务器选取待备份文件并生成若干文件子表；根据每一子表生成一拷贝作业发送给作业调度器；6）作业调度器将不同拷贝作业发送给不同的备份节点，将待备份文件拷贝到对应位置。

主权项

1.一种用于海量数据备份的并行作业备份方法，其步骤为：1)选取多台计算机作为备份节点组成一备份集群，各所述备份节点具有统一的配置；各磁盘阵列以逻辑卷方式与各备份节点连接，在逻辑卷上构建一备份数据库；2)需要备份的终端选取一备份节点作为备份管理服务器，并在该备份管理服务器上启动待备份对象的备份策略；其中，所述备份对象以目录形式定义，即每一备份对象对应一目录；3)该备份管理服务器根据该备份策略选取一备份节点作为作业调度服务器，并检查该备份数据库中是否存在该备份对象的目录信息表和文件信息表，如果没有，则建立该备份对象的目录信息表和文件信息表；然后逐层获取该备份对象对应的目录结构，每获取一目录，在该目录信息表中插入一条目录信息，并生成一扫描作业；所述扫描作业包括扫描程序名和目标目录名；4)该备份管理服务器将各扫描作业及对应的作业路径提交给该作业调度服务器；该作业调度服务器选取若干备份节点作为执行节点，并将每一扫描作业及其对应的作业路径发送给一执行节点；各执行节点对收到的扫描作业中的目标目录进行扫描，记录该目标目录下的所有文件信息，并在该文件信息表为扫描到的每个文件插入一条文件信息；5)该备份管理服务器根据该备份策略、目录信息表和文件信息表选取待备份文件生成一文件列表，并根据切分阈值对该文件列表进行切分，得到若干子表；6)该备份管理服务器根据每一子表生成一拷贝作业，并将各拷贝作业发送给该作业调度服务器；所述拷贝作业包括拷贝程序名、带路径的文件名和带路径的备份文件名；7)该作业调度服务器将不同拷贝作业发送给不同的备份节点，备份节点根据收到的拷贝作业将对应的待备份文件拷贝到该逻辑卷中对应位置。