[发明专利]一种基于k8s的监控系统及监控方法在审
申请号: | 202010830892.3 | 申请日: | 2020-08-18 |
公开(公告)号: | CN111931028A | 公开(公告)日: | 2020-11-13 |
发明(设计)人: | 陈章 | 申请(专利权)人: | 北京微步在线科技有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951 |
代理公司: | 北京金信知识产权代理有限公司 11225 | 代理人: | 喻嵘 |
地址: | 100086 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 k8s 监控 系统 方法 | ||
1.一种基于k8s的监控系统,其特征在于,包括:
管理容器创建数据抓取方案,并将所述数据抓取方案提供给抓取容器;
所述抓取容器基于所述数据抓取方案进行数据抓取;
所述管理容器还基于抓取到的数据的数据量大小,动态调整其他容器的大小;其中,所述其他容器至少包括存储容器和分析容器。
2.根据权利要求1所述的监控系统,其特征在于,还包括:
所述管理容器还确定所述抓取到的数据是否满足所述数据抓取方案的要求;其中,所述数据抓取方案至少包括关于数据类型、数据大小以及数据内容的要求;
在所述抓取到的数据未否满足所述数据抓取方案的要求的情况下,控制所述抓取容器基于所述数据抓取方案继续进行数据抓取。
3.根据权利要求1所述的监控系统,其特征在于,所述抓取容器基于所述数据抓取方案,利用网络爬虫进行数据抓取。
4.根据权利要求3所述的监控系统,其特征在于,所述管理容器根据在预设时间段内抓取到数据的情况,更新所述网络爬虫的爬虫代理IP,并将更新后的爬虫代理IP提供给所述抓取容器,以使所述抓取容器基于所述数据抓取方案利用所述更新后的爬虫代理IP进行数据抓取。
5.根据权利要求1所述的监控系统,其特征在于,还包括:
所述抓取容器将所述抓取到的数据存储至所述存储容器;
所述分析容器获取所述存储容器中的所述抓取到的数据,并从所述抓取到的数据中提取待监控数据;查找预先设定的关注数据群中是否存在与所述待监控数据相匹配的关注数据;若存在,通过报警容器以警报信息的形式进行报警。
6.根据权利要求1所述的监控系统,其特征在于,还包括:
API控制容器管理所述监控系统的各容器之间的API接口。
7.一种监控方法,其特征在于,应用于权利要求1-6中任一所述的监控系统,所述监控方法包括:
创建数据抓取方案;
基于所述数据抓取方案进行数据抓取;
基于抓取到的数据的数据量大小,动态调整容器的大小。
8.根据权利要求7所述的监控方法,其特征在于,还包括:
确定所述抓取到的数据是否满足所述数据抓取方案的要求;其中,所述数据抓取方案至少包括关于数据类型、数据大小以及数据内容的要求;
在所述抓取到的数据未否满足所述数据抓取方案的要求的情况下,基于所述数据抓取方案继续进行数据抓取。
9.根据权利要求1所述的监控方法,其特征在于,所述基于所述数据抓取方案进行数据抓取,包括:
基于所述数据抓取方案,利用网络爬虫进行数据抓取。
10.根据权利要求3所述的监控方法,其特征在于,还包括:
根据预设时间段内抓取到数据的情况,更新所述网络爬虫的爬虫代理IP,以基于所述数据抓取方案利用所述更新后的爬虫代理IP进行数据抓取。
11.根据权利要求1所述的监控方法,其特征在于,还包括:
从所述抓取到的数据中提取待监控数据;
查找预先设定的关注数据群中是否存在与所述待监控数据相匹配的关注数据;
若存在,以警报信息的形式进行报警。
12.根据权利要求1所述的监控方法,其特征在于,还包括:
管理所述监控系统中各容器之间的API接口。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京微步在线科技有限公司,未经北京微步在线科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010830892.3/1.html,转载请声明来源钻瓜专利网。