[发明专利]一种基于Hadoop文件系统实现数据异地容灾的方法

摘要

本发明公开一种基于Hadoop文件系统实现数据异地容灾的方法，属于数据安全技术领域，利用性能管理系统的性能数据具有时间稳定的特征，适于做数据增量备份，同时性能数据全部存储在Hadoop分布式文件系统中的特性，利用Hadoop分布式文件系统数据导入/导出的机制，将数据以文件方式从Hadoop系统中导出，然后将文件加密传输到异地容灾系统，最后将文件导入到容灾系统的Hadoop系统中实现数据异地容灾的同步备份。本发明有效解决了当前性能管理系统的性能数据异地容灾备份时，采用常规方式在限定时间内无法完成的问题，并且实现数据容灾备份的备份效率非常高，提高了系统数据安全性。

主权项

1.一种基于Hadoop文件系统实现数据异地容灾的方法，其特征在于,利用性能管理系统的性能数据具有时间稳定的特征，适于做数据增量备份，同时性能数据全部存储在Hadoop分布式文件系统中的特性，利用Hadoop分布式文件系统数据导入/导出的机制，将数据以文件方式从Hadoop系统中导出，然后将文件加密传输到异地容灾系统，最后将文件导入到容灾系统的Hadoop系统中实现数据异地容灾的同步备份；根据性能管理系统的硬件配置和应用服务在异地搭建性能管理容灾系统，在性能管理系统中部署容灾导出模块，在性能管理容灾系统中部署容灾导入模块；通过性能管理系统的性能数据文件入库进程，将性能数据文件入库到Hadoop文件系统中，并将性能数据刷新到Oracle数据库，同时将新增的性能数据文件记录下来；后继容灾导出模块定期扫描性能数据文件入库记录，找出新入库的性能数据文件列表，再利用Hadoop文件系统的文件导出功能，批量导出到本地目录中，进行文件打包压缩之后，基于SFTP文件传输方式传输到异地的性能管理容灾系统中；性能管理容灾系统对接收后的压缩包解压到本地目录中，再通过容灾系统的Hadoop文件系统的文件导入功能，将解压后的性能数据文件批量导入到Hadoop文件系统中，同时将性能数据刷新到容灾系统的Oracle数据库。