[发明专利]一种基于物理级的数据库日志挖掘方法

摘要

本发明公开了一种基于物理级的数据库日志挖掘方法，包括以下几个步骤(1)获取数据库系统数据块大小、在线日志全路径名、日志存储文件系统格式；(2)从数据库系统视图中获取当前日志组信息，获取操作信息；(3)挖掘日志文件头信息，从日志文件头中获取当前的日志序列；(4)挖掘日志文件头后的数据块，每次挖掘固定大小数据并记录当前挖掘的截止位置索引，将数据块内容写入新建的临时文件；(5)当遇到文件头的结束标志时，则在数据块临时文件写入结束标志，结束当前文件挖掘，开始下一日志文件挖掘。本发明可以从根本上实现挖掘出的日志信息与生产库的一致性与完整性，还能降低数据库日志挖掘对生产库的性能影响。

主权项

一种基于物理级的数据库日志挖掘方法，其特征在于，包括以下几个步骤：(1)从数据库表v$archived_log获取当前操作系统数据块大小；并从数据库表v$archived_log中获取Redo日志全路径名，根据Redo日志全路径名判断日志文件是存储在文件系统还是Oracle自带自动存储管理ASM上，如果Redo日志文件存储在ASM上，则从数据库表v$asm_disk中取得路径；(2)从数据库表v$log,v$logfile中获取数据库Redo日志组信息；(3)根据数据库Redo日志组信息，启动多个子进程，对每一个Redo日志组进行单独进程挖掘；根据数据库Redo日志文件头标志位信息，挖掘日志文件头信息，比对thread和数据库ID，判断是否和生产库一致，如果不一致，则返回错误，如果一致，则从日志文件头中获取当前的日志序列sequence号，判断日志序列是否存在，如果不存在则返回错误，如果存在，则检查当前日志文件头中序列是否和之前获取的日志序列sequence号一致，如果不一致，说明当前文件已经被覆盖，则返回错误信息，终止当前日志挖掘，等待归档流程处理，如果一致，则转向步骤(4)；(4)开始挖掘日志文件头后的数据块，每次挖掘固定大小数据，记录当前挖掘的数据块数，将数据块内容写入新建的临时文件，临时文件名根据业务系统id、在线日志组号、sequence号以及当前数据块编号进行命名，如果当前日志文件挖掘没有结束，则继续执行步骤(4)，如果当前日志文件挖掘结束，则转向步骤(5)；(5)重新挖掘日志文件头，获取日志结束标志，并写入临时文件中，然后计算日志文件校验和，并将校验和写入到日志头的第14‑15字节，结束当前文件挖掘，然后开始挖掘下一日志文件。