[发明专利]一种测试Hadoop集群稳定性的方法及系统有效
| 申请号： | 201510808018.9 | 申请日： | 2015-11-19 |
| 公开（公告）号： | CN105490871B | 公开（公告）日： | 2019-03-15 |
| 发明（设计）人： | 范荣盛 | 申请（专利权）人： | 浪潮（北京）电子信息产业有限公司 |
| 主分类号： | H04L12/26 | 分类号： | H04L12/26 |
| 代理公司： | 北京集佳知识产权代理有限公司 11227 | 代理人： | 罗满 |
| 地址： | 100085 北京市海*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 基准测试 服务器运行 服务器 资源消耗数据 测试 实时获取 | ||
1.一种测试Hadoop集群稳定性的方法，其特征在于，包括：
Namenode服务器运行基准测试，Datanode服务器运行NMON工具；其中，所述基准测试包括DFSIO基准测试和Terasort基准测试；
所述Namenode服务器通过所述NMON工具，实时获取所述Datanode服务器运行基准测试的第一资源消耗数据；
所述Namenode服务器根据所述第一资源消耗数据判断Hadoop集群的稳定性；
其中，所述Namenode服务器根据所述第一资源消耗数据判断Hadoop集群的稳定性，包括：
所述Namenode服务器判断所述第一资源消耗数据中的资源消耗值是否在预定范围内；
若是，则判定所述Hadoop集群的稳定性为稳定；若否，则判定所述所述Hadoop集群的稳定性为不稳定；
其中，所述Namenode服务器通过所述NMON工具，实时获取所述Datanode服务器运行基准测试的资源消耗数据，并根据所述第一资源消耗数据判断Hadoop集群的稳定性包括：
所述Namenode服务器通过所述NMON工具，实时获取所述Datanode服务器运行DFSIO基准测试的第二资源消耗数据，并根据所述第二资源消耗数据判断所述Hadoop集群的HDFS的稳定性；
所述Namenode服务器运行DFSIO基准测试包括：所述Namenode服务器运行DFSIO-write基准测试和DFSIO-Read基准测试；
其中，所述Namenode服务器通过所述NMON工具，实时获取所述Datanode服务器运行基准测试的资源消耗数据，并根据所述第一资源消耗数据判断Hadoop集群的稳定性包括：
所述Namenode服务器通过所述NMON工具，实时获取所述Datanode服务器运行Terasort基准测试的第三资源消耗数据，并根据所述第三资源消耗数据判断所述Hadoop集群的的MapReduce的稳定性。
2.一种测试Hadoop集群稳定性的系统，其特征在于，包括：
Namenode服务器和Datanode服务器；其中，所述Namenode服务器运行基准测试，所述Datanode服务器运行NMON工具；所述基准测试包括DFSIO基准测试和Terasort基准测试；
所述Namenode服务器用于通过所述NMON工具，实时获取所述Datanode服务器运行基准测试的第一资源消耗数据，并根据所述第一资源消耗数据判断Hadoop集群的稳定性；
其中，所述Namenode服务器包括：
判断模块，用于判断所述第一资源消耗数据中的资源消耗值是否在预定范围内；若是，则判定所述Hadoop集群的稳定性为稳定；若否，则判定所述所述Hadoop集群的稳定性为不稳定；
所述Namenode服务器包括：
第一测试模块，用于通过所述NMON工具，实时获取所述Datanode服务器运行DFSIO基准测试的第二资源消耗数据，并根据所述第二资源消耗数据判断所述Hadoop集群的HDFS的稳定性；
所述Namenode服务器运行DFSIO基准测试包括：所述Namenode服务器运行DFSIO-write基准测试和DFSIO-Read基准测试；
所述Namenode服务器包括：
第二测试模块，用于通过所述NMON工具，实时获取所述Datanode服务器运行Terasort基准测试的第三资源消耗数据，并根据所述第三资源消耗数据判断所述Hadoop集群的的MapReduce的稳定性。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于浪潮（北京）电子信息产业有限公司，未经浪潮（北京）电子信息产业有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201510808018.9/1.html，转载请声明来源钻瓜专利网。
