[发明专利]针对Oracle数据库重做日志文件的数据挖掘方法

摘要

本发明公开了一种针对Oracle数据库重做日志文件的数据挖掘方法，通过快速分析日志来追踪日志变化，在变化的第一时间挖掘日志获得数据变化片段，日志变化数据缓存在本地文件系统中，之后通过传输进程传输到备端。备端合成进程将日志片段合成日志文件，最后由应用进程进行日志的分析与注册，校验和注册通过后将日志文件写入到灾备数据库，实现数据库数据复制。本发明支持异构的操作系统和数据库管理系统，便于客户在不同数据库管理系统和操作系统平台之间的数据同步；跟传输整个日志文件相比，本方法传输的数据量大大降低，而且本方法能控制子进程数量，使其所占资源较少。

主权项

1.一种针对Oracle数据库重做日志文件的数据挖掘方法，其特征在于，包括：/nS1：获取一条数据库重做日志的全路径名，根据全路径名判断是存储在文件系统中还是自动存储管理器ASM上；/nS2：如果日志文件存在ASM上，则从所述ASM中获取所述重做日志文件的数据块大小信息；否则访问文件系统，从所述文件系统中获取所述重做日志文件的数据块大小信息，数据块大小信息指的是一个数据块拥有多少个字节；/nS3：根据当前重做日志文件的数据块大小信息，计算数据块数量，启动多个子进程，对每一个数据块进行单独应用进程的数据挖掘，若考虑处理器性能因素，也可设置最大进程数，避免进程数量过多；/nS4：挖掘当前重做日志文件的“文件头”第24-27字节的数据库ID信息和第176-177字节的线程信息，检查是否和该数据库的对应信息一致，用于判断所获取的当前重做日志是否属于所述数据库；如果不一致，则返回错误，如果一致，则进入下一步；/nS5：读取并记录当前重做日志文件的“文件头”第8-11字节的日志序列号logsequence，日志序列号表示当前重做日志文件的先后顺序；/nS6：挖掘当前重做日志文件的“文件头”后的记录内容的数据块，每次挖掘1M数据，如果获取失败则返回错误信息，终止当前挖掘；/nS7：比较重做日志文件的“文件头”中的日志序列号log sequence和所述记录内容的数据块中的日志序列号log sequence，如果不一致，说明当前重做日志文件中记录的不是所述数据库中的重做记录内容，返回错误信息并终止当前的日志挖掘；/nS8：如果所述两个日志序列号一致，记录当前挖掘的位置，并将挖掘后的数据块内容写入新建的临时日志记录文件中，临时文件名根据业务系统id，在线日志组号，日志序列号以及当前数据块编号进行命名；/nS9：检查重做日志文件是否结束所有数据块的挖掘工作，如果没有结束，则跳转至S5，继续挖掘重做日志文件中的下一个数据块；/nS10：如果重做日志文件已经结束挖掘，则记录当前重做日志文件的数据块的数量，并将所述数据块的数量存入所述重做日志文件的“文件头”的24-27字节；/nS11：进行重做日志文件的校验，并将检验的结果写入重做日志“文件头”的14-15字节；/nS12：将重做日志文件的“文件头”的236-239字节中的在线日志类型改为归档日志类型；/nS13：结束当前重做日志文件的挖掘或进行下一个重做日志文件的挖掘。/n