[发明专利]一种基于虚拟化计算的大数据平台运维方法以及系统

说明书

本发明提供一种基于虚拟化计算的大数据平台运维方法，建立虚拟机镜像，所述虚拟机镜像包括系统配置文件以及用户环境变量；虚拟机镜像生成后保存到镜像仓库服务器，根据虚拟机镜像生成的时间顺序管理镜像版本；根据需求，将对应版本的虚拟机镜像发送至服务器上，服务器运行所述虚拟机镜像；本发明还提供一种基于虚拟化计算的大数据平台运维系统，便于用户维护。

技术领域

本发明涉及一种基于虚拟化计算的大数据平台运维方法以及系统。

背景技术

现有的大数据运维是基于服务器IP地址的SSH远程连接服务器，通过自动化脚本执行命令管理服务器，但是在大数据集群中往往是布置了成百上千台的服务器，若是采用手工操作进行维护，则其效率非常低下，难度也非常大，其中大量的运维脚本，杂乱无章，内容重复，质量难以保证，最终给故障留下隐患，没有对现网预期状态的定义和管理，所有的现网状态都是脚本日积月累的产物，导致服务器状态漂移，进而给业务稳定性留下隐患。

发明内容

本发明要解决的技术问题，在于提供一种基于虚拟化计算的大数据平台运维方法以及系统，实现从传统的分布式脚本执行，变成了分布式容器替换，便于用户进行维护。

本发明之一是这样实现的：一种基于虚拟化计算的大数据平台运维方法，包括：

步骤1、建立虚拟机镜像，所述虚拟机镜像包括系统配置文件以及用户环境变量；

步骤2、虚拟机镜像生成后保存到镜像仓库服务器，根据虚拟机镜像生成的时间顺序管理镜像版本；

步骤3、根据需求，将对应版本的虚拟机镜像发送至服务器上，服务器运行所述虚拟机镜像。

进一步地，还包括步骤4、采集整个大数据服务器集群的日志文件，通过日志分析出现异常的服务器，将日志分析中出现异常的服务器信息进行反馈。

进一步地，还包括步骤5、针对反馈的异常服务器进行算法分析，判断是否需要做镜像恢复的操作，若是需要做镜像恢复操作，则通知镜像仓库服务器更新正常镜像给异常服务器做更新。

本发明之二是这样实现的：一种基于虚拟化计算的大数据平台运维系统，包括：

建立模块，建立虚拟机镜像，所述虚拟机镜像包括系统配置文件以及用户环境变量；

管理模块，虚拟机镜像生成后保存到镜像仓库服务器，根据虚拟机镜像生成的时间顺序管理镜像版本；

更新模块，根据需求，将对应版本的虚拟机镜像发送至服务器上，服务器运行所述虚拟机镜像。

进一步地，还包括日志模块，采集整个大数据服务器集群的日志文件，通过日志分析出现异常的服务器，将日志分析中出现异常的服务器信息进行反馈。

进一步地，还包括恢复模块，针对反馈的异常服务器进行算法分析，判断是否需要做镜像恢复的操作，若是需要做镜像恢复操作，则通知镜像仓库服务器更新正常镜像给异常服务器做更新。

进一步地，所述建立虚拟机镜像进一步具体为：在服务器的虚拟机中将虚拟机镜像实例化为容器，之后运行在服务器的虚拟机上，最后将所述虚拟机保存为虚拟机镜像。

本发明具有如下优点：

1)通过虚拟化实现大数据平台版本管理：通过虚拟化实现系统环境、配置、数据分离实现大数据集群的快速恢复和升级迭代。

2)自动化的故障恢复：通过大数据平台自动运维系统，实现集群中出现故障服务器节点时可以自动完成故障节点的镜像恢复，实现大数据平台的故障节点的自动恢复。

3)节省运维人工成本：实现将脚本管理配置转换为镜像版本管理配置，并且通过本发明的自动化运维系统可以极大的减小人工介入的成本，大部分可以实现自动化和智能化的运维目标。

附图说明