[发明专利]一种基于Ambari的大数据平台的监测方法在审

专利信息
申请号: 201911204574.X 申请日: 2019-11-29
公开(公告)号: CN110955579A 公开(公告)日: 2020-04-03
发明(设计)人: 王玉叶;范渊 申请(专利权)人: 杭州安恒信息技术股份有限公司
主分类号: G06F11/30 分类号: G06F11/30;G06F11/32
代理公司: 北京集佳知识产权代理有限公司 11227 代理人: 张春辉
地址: 310000 浙江省*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 ambari 数据 平台 监测 方法
【说明书】:

本申请公开了一种基于Ambari的大数据平台的监测方法、装置、设备及可读存储介质,方案包括:对当前平台的目标性能参数进行监测,得到监测值,其中目标性能参数包括Ambari引擎、CPU性能、磁盘利用率;判断监测值处于异常范围的时间是否超过时间周期;若是,则生成告警信息。可见,该方案从Ambari引擎状态、CPU性能、磁盘利用率三个维度对大数据平台运行状态进行实时监测,并在监测到异常时输出告警信息,因此能够及时发现异常状态,有利于平台用户及平台运维人员及时处理异常,防止更严重的问题的发生,且监测成本较低。

技术领域

本申请涉及计算机技术领域,特别涉及一种基于Ambari的大数据平台的监测方法、装置、设备及可读存储介质。

背景技术

Ambari是一种基于Web的工具,支持Apache Hadoop集群的供应、管理和监控。Ambari支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、Hbase、Zookeeper、Sqoop和Hcatalog等,因此也是大数据平台搭建、管理、监控利器。

在基于Ambari大数据平台中,会出现引擎所在节点异常的情况、平台性能不足、磁盘空间不足等情况,这些情况会导致大数据引擎无法正常运行,数据无法正常接入,分析策略异常甚至平台挂掉,数据流失等严重问题。然而,实时关注平台运行状态是否异常对于平台运维人员是一种负担,且成本较高。

可见,如何提供一种对基于Ambari的大数据平台的监测方案,实现及时监测并降低监测成本,是亟待本领域技术人员解决的问题。

发明内容

本申请的目的是提供一种基于Ambari的大数据平台的监测方法、装置、设备及可读存储介质,用以解决目前无法实现对基于Ambari的大数据平台异常状态的及时监测或监测成本较高的问题。其具体方案如下:

第一方面,本申请提供了一种基于Ambari的大数据平台的监测方法,包括:

对当前平台的目标性能参数进行监测,得到监测值,其中所述目标性能参数包括Ambari引擎、CPU性能、磁盘利用率;

判断所述监测值处于异常范围的时间是否超过时间周期;

若是,则生成告警信息。

优选的,在所述对当前平台的目标性能参数进行监测之前,还包括:

分别设置各项所述目标性能参数的异常范围和/或时间周期。

优选的,在所述对当前平台的目标性能参数进行监测之前,还包括:

从当前平台的Ambari引擎中选择并设置待进行监测的Ambari引擎。

优选的,在所述目标性能参数为Ambari引擎时,所述对当前平台的目标性能参数进行监测,得到监测值,包括:

生成对所述当前平台的前端接口的调用请求,并发送至所述当前平台,得到返回数据;

根据所述返回数据,确定所述Ambari引擎的状态数据,以作为监测值。

优选的,在所述目标性能参数为CPU性能或磁盘利用率时,所述对当前平台的目标性能参数进行监测,得到监测值,包括:

利用后台操作命令,对当前平台的CPU性能或磁盘利用率进行监测,得到监测值。

优选的,所述磁盘利用率包括:系统盘磁盘利用率和数据盘磁盘利用率。

优选的,在所述对当前平台的目标性能参数进行监测,得到监测值之后,还包括:

将所述监测值存储至预设存储空间。

第二方面,本申请提供了一种基于Ambari的大数据平台的监测装置,包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州安恒信息技术股份有限公司,未经杭州安恒信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201911204574.X/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top