[发明专利]数据采集方法、装置、计算机设备及存储介质有效
申请号: | 201811528176.9 | 申请日: | 2018-12-13 |
公开(公告)号: | CN109783533B | 公开(公告)日: | 2023-06-02 |
发明(设计)人: | 丁晶晶 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/25;G06F9/455 |
代理公司: | 深圳众鼎专利商标代理事务所(普通合伙) 44325 | 代理人: | 黄章辉 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 采集 方法 装置 计算机 设备 存储 介质 | ||
1.一种数据采集方法,应用于数据采集系统中的数据采集装置,其特征在于,所述数据采集系统包括数据库服务器和服务即平台PaaS服务器,所述PaaS服务器运行有容器操作系统集群,所述容器操作系统集群中每个容器操作系统上部署有应用容器引擎集群,所述应用容器引擎集群上搭建有PaaS系统,所述PaaS服务器还包括数据库客户端和所述数据采集装置,所述数据库客户端运行在所述应用容器引擎集群的应用引擎容器中,所述数据采集方法包括:
获取所述应用容器引擎集群中所有在运行的应用容器引擎对应的应用容器引擎列表信息;
根据所述应用容器引擎列表信息获取目标应用容器引擎的容器标识,所述目标应用容器引擎为所述应用容器引擎列表信息中指示的任意一个应用容器引擎;
获取所述目标应用容器引擎的容器标识对应的控制组文件;
对所述控制组文件进行数据分析以获得所述控制组文件中的容器性能数据;
将所述容器性能数据以及所述目标应用容器引擎的容器标识传输至数据库客户端,以使得所述数据库客户端将所述容器性能数据和所述目标应用容器引擎的容器标识关联发送至所述数据库服务器;
将数据库客户端对应的镜像预先存储在云端服务器,在所述应用容器引擎中部署数据库客户端时,从云端服务器获取数据库客户端对应的镜像进行安装。
2.如权利要求1所述的数据采集方法,其特征在于,所述获取所述应用容器引擎集群对应的应用容器引擎列表信息,包括:
获取应用容器引擎集群的应用容器引擎服务程序;
根据所述应用容器引擎服务程序获取所述应用容器引擎集群中所有在运行的应用容器对应的应用容器引擎列表信息。
3.如权利要求1所述的数据采集方法,其特征在于,所述根据所述应用容器引擎列表信息获取目标应用容器引擎的容器标识,包括:
从所述应用容器引擎列表信息提取文本信息;
通过sed或awk文本分析工具对所述文本信息进行文本分析,以获取所述目标应用容器引擎的容器标识。
4.如权利要求1所述的数据采集方法,其特征在于,所述获取所述目标应用容器引擎的容器标识对应的控制组文件,包括:
使用全局正则表达式打印命令获取所述目标应用容器引擎的容器标识对应的文件路径;
通过所述文件路径获取所述目标应用容器引擎的容器标识对应的控制组文件。
5.如权利要求1所述的数据采集方法,其特征在于,所述对所述控制组文件进行数据分析以获得所述控制组文件中的容器性能数据,包括:
通过sed或awk文本分析工具对所述控制组文件进行数据分析,以确定所述控制组文件中的容器性能数据对应的文本标识;
获取所述文本标识对应的所述控制组文件中的容器性能数据。
6.如权利要求1-5任一项所述的数据采集方法,其特征在于,所述控制组文件包括如下中的至少一项:blkio文件、cpu文件、cpuacct文件、devices文件、freezer文件、memory文件。
7.如权利要求1所述的数据采集方法,其特征在于,所述数据采集方法还包括:
确定所述容器操作系统的系统标识;
获取所述系统标识对应的系统文件信息;
根据所述系统文件信息获取所述系统标识对应的容器操作系统的系统性能数据;
将所述系统性能数据和所述系统标识传输至所述数据库客户端,以使得所述数据库客户端将所述系统性能数据和所述系统标识关联发送至所述数据库服务器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811528176.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置