[发明专利]应急性爆发数据可靠备份及实时分析方法及系统

说明书

技术领域

本发明涉及一种计算机信息数据存储，特别涉及一种应急性爆发数据可靠备份及实时分析安全系统构架方法及系统。

背景技术

现有的数据备份系统结构主要有Host-Base、Lan-Base和基于SAN(StorageAreaNetwork，存储区域网络，)架构的LAN-Free和Server-Free备份。Host-Base备份是传统数据备份结构，这种结构中磁带读写设备直接连接于需要备份的服务器上，为该服务器数据备份，但这种备份不适合于多个服务器需要数据备份，也不利于备份系统的共享。LAN-Base备份以局域网络为基础，局域网中一台服务器为备份服务器，由这个备份服务器负责整个系统的备份，多个需要备份数据的应用服务器通过局域网将数据传到磁带库中实现备份。当备份数据量大或备份频率高时，局域网的性能下降快，不适合重载荷的网络应用环境。LAN-Free备份中数据无需通过局域网而直接进行备份，用户只需将磁带机或磁带库等备份设备连接到SAN中，各服务器就可把需要备份的数据直接发送到共享的备份设备上，不必再经过局域网链路。LAN-Free便于数据备份的统一管理、备份速度快、网络传输压力小，但起实现较为复杂，且成本较高。Server-Free备份在SAN的交换层实现数据的传输工作，这样备份数据不经过网络，也不经过应用服务器总线，保证了网络与应用服务器的高效运行。但目前Server-Free备份技术还不够成熟，兼容设备不多。随着技术的发展，越来越多的数据呈爆发式增长，而对于这种高速、海量的数据若要要求存储，上述现有的数据备份结构、不能很好的解决这一问题，且不具有对数据进行分析的能力，这不利于备份后数据后续的使用。

因此需要一种应急性爆发数据可靠备份及实时分析安全系统构架方法及系统。

发明内容

有鉴于此，本发明所要解决的技术问题是提供一种应急性爆发数据可靠备份及实时分析安全系统构架方法及系统，该方法将聚类技术用于数据备份中，将爆发的大量数据进行聚类，使得同一类的数据相似度高，将各类数据均衡分布到各数据库中进行备份，这样每个存储设备的数据量相对较小。此方法容易实现、能提高数据备份速度和节约系统资源。

本发明的目的之一是提出一种应急性爆发数据可靠备份及实时分析安全系统构架方法；本发明的目的之二是提出一种应急性爆发数据可靠备份及实时分析安全系统构架系统。

本发明的目的之一是通过以下技术方案来实现的：

本发明提供的一种应急性爆发数据可靠备份及实时分析安全系统构架方法，包括以下步骤：

S1：建立应用服务器和备份服务器；

S2：检测应用服务器中是否有备份数据，如果无，则继续检测；

S3：如果有，则向备份服务器发送备份控制命令；

S4：控制备份服务器接收备份控制命令并建立临时目录；

S5：应用服务器将需要的备份数据发送到备份服务器的临时目录；

S6：将备份数据进行数据聚类处理获得聚类数据；

S7：在临时目录下建立对应的聚类子目录；

S8：将聚类数据分别按类加载到对应的聚类子目录中并建立临时索引；

S9：在备份服务器中建立备份目录和备份索引；

S10：通过缓冲区管理将临时目录和临时索引中的数据分别转移到备份目录和备份索引中；

S11：识别与备份服务器连接的存储设备；

S12：将备份目录上的数据按类转移到不同的存储设备中；

S13：移除备份目录上的数据。

进一步，所述步骤S5中应用服务器将备份数据通过SAN传输发送到备份服务器的临时目录中。

进一步，所述步骤S6中的数据聚类包括以下步骤：

S61：获取备份数据；

S62：随机设置Ｎ个聚类原型；

S63：根据距离相异度最小原则，计算备份数据和聚类原型之间的距离值；

S64：将备份数据划入距离值最小的第ｉ个聚类原型中；

S65：重新选择聚类原型；

S66：对新的聚类原型再次执行步骤S63和步骤S64；

S67：判断此次聚类划分是否与之前一次相同，如果是，则聚类结束；

S68：如果否，则返回步骤S66直至所有的备份数据聚类完毕。

本发明的目的之二是通过以下技术方案来实现的：