[发明专利]一种基于Ambari的大数据平台的监测方法在审
申请号: | 201911204574.X | 申请日: | 2019-11-29 |
公开(公告)号: | CN110955579A | 公开(公告)日: | 2020-04-03 |
发明(设计)人: | 王玉叶;范渊 | 申请(专利权)人: | 杭州安恒信息技术股份有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F11/32 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 张春辉 |
地址: | 310000 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 ambari 数据 平台 监测 方法 | ||
本申请公开了一种基于Ambari的大数据平台的监测方法、装置、设备及可读存储介质,方案包括:对当前平台的目标性能参数进行监测,得到监测值,其中目标性能参数包括Ambari引擎、CPU性能、磁盘利用率;判断监测值处于异常范围的时间是否超过时间周期;若是,则生成告警信息。可见,该方案从Ambari引擎状态、CPU性能、磁盘利用率三个维度对大数据平台运行状态进行实时监测,并在监测到异常时输出告警信息,因此能够及时发现异常状态,有利于平台用户及平台运维人员及时处理异常,防止更严重的问题的发生,且监测成本较低。
技术领域
本申请涉及计算机技术领域,特别涉及一种基于Ambari的大数据平台的监测方法、装置、设备及可读存储介质。
背景技术
Ambari是一种基于Web的工具,支持Apache Hadoop集群的供应、管理和监控。Ambari支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、Hbase、Zookeeper、Sqoop和Hcatalog等,因此也是大数据平台搭建、管理、监控利器。
在基于Ambari大数据平台中,会出现引擎所在节点异常的情况、平台性能不足、磁盘空间不足等情况,这些情况会导致大数据引擎无法正常运行,数据无法正常接入,分析策略异常甚至平台挂掉,数据流失等严重问题。然而,实时关注平台运行状态是否异常对于平台运维人员是一种负担,且成本较高。
可见,如何提供一种对基于Ambari的大数据平台的监测方案,实现及时监测并降低监测成本,是亟待本领域技术人员解决的问题。
发明内容
本申请的目的是提供一种基于Ambari的大数据平台的监测方法、装置、设备及可读存储介质,用以解决目前无法实现对基于Ambari的大数据平台异常状态的及时监测或监测成本较高的问题。其具体方案如下:
第一方面,本申请提供了一种基于Ambari的大数据平台的监测方法,包括:
对当前平台的目标性能参数进行监测,得到监测值,其中所述目标性能参数包括Ambari引擎、CPU性能、磁盘利用率;
判断所述监测值处于异常范围的时间是否超过时间周期;
若是,则生成告警信息。
优选的,在所述对当前平台的目标性能参数进行监测之前,还包括:
分别设置各项所述目标性能参数的异常范围和/或时间周期。
优选的,在所述对当前平台的目标性能参数进行监测之前,还包括:
从当前平台的Ambari引擎中选择并设置待进行监测的Ambari引擎。
优选的,在所述目标性能参数为Ambari引擎时,所述对当前平台的目标性能参数进行监测,得到监测值,包括:
生成对所述当前平台的前端接口的调用请求,并发送至所述当前平台,得到返回数据;
根据所述返回数据,确定所述Ambari引擎的状态数据,以作为监测值。
优选的,在所述目标性能参数为CPU性能或磁盘利用率时,所述对当前平台的目标性能参数进行监测,得到监测值,包括:
利用后台操作命令,对当前平台的CPU性能或磁盘利用率进行监测,得到监测值。
优选的,所述磁盘利用率包括:系统盘磁盘利用率和数据盘磁盘利用率。
优选的,在所述对当前平台的目标性能参数进行监测,得到监测值之后,还包括:
将所述监测值存储至预设存储空间。
第二方面,本申请提供了一种基于Ambari的大数据平台的监测装置,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州安恒信息技术股份有限公司,未经杭州安恒信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911204574.X/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种加湿器
- 下一篇:变截面的地下连续墙的施工方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置