[发明专利]一种测试Hadoop集群稳定性的方法及系统有效
申请号: | 201510808018.9 | 申请日: | 2015-11-19 |
公开(公告)号: | CN105490871B | 公开(公告)日: | 2019-03-15 |
发明(设计)人: | 范荣盛 | 申请(专利权)人: | 浪潮(北京)电子信息产业有限公司 |
主分类号: | H04L12/26 | 分类号: | H04L12/26 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 100085 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例公开了一种测试Hadoop集群稳定性的方法及系统,包括:Namenode服务器运行基准测试,Datanode服务器运行NMON工具;其中,基准测试包括DFSIO基准测试和Terasort基准测试;Namenode服务器通过NMON工具,实时获取Datanode服务器运行基准测试的第一资源消耗数据;Namenode服务器根据第一资源消耗数据判断Hadoop集群的稳定性,可见,在本实施例中,通过在Namenode服务器上运行DFSIO基准测试和Terasort基准测试,能分别测出Hadoop集群HDFS和MapReduce的稳定性,从而测试整个Hadoop集群的稳定性。 | ||
搜索关键词: | 基准测试 服务器运行 服务器 资源消耗数据 测试 实时获取 | ||
【主权项】:
1.一种测试Hadoop集群稳定性的方法,其特征在于,包括:Namenode服务器运行基准测试,Datanode服务器运行NMON工具;其中,所述基准测试包括DFSIO基准测试和Terasort基准测试;所述Namenode服务器通过所述NMON工具,实时获取所述Datanode服务器运行基准测试的第一资源消耗数据;所述Namenode服务器根据所述第一资源消耗数据判断Hadoop集群的稳定性;其中,所述Namenode服务器根据所述第一资源消耗数据判断Hadoop集群的稳定性,包括:所述Namenode服务器判断所述第一资源消耗数据中的资源消耗值是否在预定范围内;若是,则判定所述Hadoop集群的稳定性为稳定;若否,则判定所述所述Hadoop集群的稳定性为不稳定;其中,所述Namenode服务器通过所述NMON工具,实时获取所述Datanode服务器运行基准测试的资源消耗数据,并根据所述第一资源消耗数据判断Hadoop集群的稳定性包括:所述Namenode服务器通过所述NMON工具,实时获取所述Datanode服务器运行DFSIO基准测试的第二资源消耗数据,并根据所述第二资源消耗数据判断所述Hadoop集群的HDFS的稳定性;所述Namenode服务器运行DFSIO基准测试包括:所述Namenode服务器运行DFSIO‑write基准测试和DFSIO‑Read基准测试;其中,所述Namenode服务器通过所述NMON工具,实时获取所述Datanode服务器运行基准测试的资源消耗数据,并根据所述第一资源消耗数据判断Hadoop集群的稳定性包括:所述Namenode服务器通过所述NMON工具,实时获取所述Datanode服务器运行Terasort基准测试的第三资源消耗数据,并根据所述第三资源消耗数据判断所述Hadoop集群的的MapReduce的稳定性。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮(北京)电子信息产业有限公司,未经浪潮(北京)电子信息产业有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201510808018.9/,转载请声明来源钻瓜专利网。