[发明专利]一种基于python的云服务器性能数据采集方法及装置

说明书

本发明公开了一种基于python的云服务器性能数据采集方法及装置，根据云商的各节点的云服务器可持续集成的全自动化性能数据收集，提高对云服务的性能稳定性进行测试，自动获取并生成某时间的性能数据；直观的表现测试结果提升可读性，提高日后测试数据的执行迭代效率；本发明在节点测试的时候实施全自动形式及可持续集成，无需人工直接干预，数据收集之后发送给指定的人员及保存本地使其作为下一次数据收集的迭代。减少了云服务的性能数据收集时间。提高日后测试数据的执行迭代效率；无需人工干扰在特殊时间段，例如夜晚、周六日等时间段获取服务器的性能指标。

技术领域

本公开涉及数据采集领域，具体涉及一种基于python的云服务器性能数据采集方法及装置。

背景技术

当前云服务市场是互联网领域中占据着重要的地位，其主机的部署遍布多个地区，且现在的趋势还在不断的扩张。期间一个新的节点上线我们就需要对其进行节点的测试，检查该节点的性能指标，云主机的运行稳定情况的性能数据收集，以及日后的节点维护及功能增加对主机性能的影响情况而做的性能指标数据收集，这些测试无疑是枯燥的。

目前云服务节点测试一般为两种，第一种，手工测试重复性工作，输入测试主机cpu、内存、磁盘I/O、带宽等，命令执行并查看其结果，将其结果一个一个汇总起来进一步分析。第二种，使用shell自动化运行脚本，前期执行无需手动操作，后期需要人工查看并进行干预性操作，其结果需要手动收集录入excel中进一步分析。第一种方案存在的问题有手工测试重复性工作枯燥，浪费不必要的时间，且测试项数量过多，需要测试的时间则需要更长，特殊时间点的测试难以满足要求，例如夜间凌晨、周末休息期间；第二种方案存在的问题有shell自动化跑脚本，自动获取其结果数据，只能人工去看每一步操作，虽然解放双手，但是不能实现数据的可视化和全自动化。

发明内容

本公开提供一种基于python的云服务器性能数据采集方法及装置，根据云商的各节点的云服务器可持续集成的全自动化性能数据收集，提高对云服务的性能稳定性进行测试；持续集成自定义执行的周期，自动获取并生成某时间的性能数据；直观的表现测试结果提升可读性，提高日后测试数据的执行迭代效率；无需人工干扰在特殊时间段例如夜晚、周六日等时间段获取服务器的性能指标。

为了实现上述目的，根据本公开的一方面，提供一种基于python的云服务器性能数据采集方法，所述方法包括以下步骤：

步骤1，运行web自动化脚本；

步骤2，使用paramiko模块以公网IP及登陆密码信息依次通过云服务器中的各服务器节点的进行虚拟主机的登陆操作；

步骤3，上传cpu测试脚本、内存测试脚本、磁盘I/O测试脚本、带宽测试脚本到虚拟主机；

步骤4，依次执行cpu测试脚本、内存测试脚本、磁盘I/O测试脚本、带宽测试脚本采集虚拟主机的各项性能数据；

步骤5，xlwt模块将虚拟主机的各项性能数据写入到excel表文件；

步骤6，把excel表文件下载回到本地的主机；

步骤7，通过jenkins模块在自定义时间段执行web自动化脚本。

进一步地，在步骤1中，所述web自动化脚本包括paramiko模块、xlwt模块、jenkins模块，采用python语言编写。

进一步地，在步骤2中，所述公网IP及登陆密码信息封装于web自动化脚本中，所述云服务器至少包括一个服务器节点，每个服务器节点至少包括一台虚拟机。

进一步地，在步骤3中，所述cpu测试脚本、内存测试脚本、磁盘I/O测试脚本和带宽测试脚本存储于本地主机中，分别用于测试cpu主频、内存的容量、磁盘I/O率和网络带宽。