[发明专利]一种混合网络环境数据采集方法及系统有效
申请号: | 201910736943.3 | 申请日: | 2019-08-10 |
公开(公告)号: | CN110532060B | 公开(公告)日: | 2022-05-03 |
发明(设计)人: | 曾晓烨;罗志达;陈晓斌 | 申请(专利权)人: | 佳都科技集团股份有限公司 |
主分类号: | G06F9/455 | 分类号: | G06F9/455;G06F9/48;G06F9/50 |
代理公司: | 北京泽方誉航专利代理事务所(普通合伙) 11884 | 代理人: | 陈照辉 |
地址: | 511400 广东省广州市番禺区东环街迎宾*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请实施例公开了一种混合网络环境数据采集方法及系统。本申请实施例提供的技术方案通过数据收集系统对资源中心的资源负荷情况进行监听,并将数据采集任务分解成Flume‑NG进程可执行的子任务,并发送至协调中心,由Flume‑Proxy进程作为Flume‑NG进程的代理对Flume‑NG进程的启停进行控制,进而从协调中心获取子任务进行处理,减少因计算能力不足而导致处理时间过长,效率低下的问题,实现计算资源在混合网络环境下的动态伸缩。 | ||
搜索关键词: | 一种 混合 网络 环境 数据 采集 方法 系统 | ||
【主权项】:
1.一种混合网络环境数据采集方法,其特征在于,包括:/n数据收集系统将数据采集任务发送至协调中心;/n数据收集系统根据数据采集任务的计算量通知资源中心调用计算资源,并在计算资源中启动Flume-Proxy进程,所述计算资源包括容器、虚拟机和/或物理机中的一种或多种;/n数据收集系统向Flume-Proxy进程发送任务启动指令;/nFlume-Proxy进程响应于任务启动指令从协调中心获取并启动Flume-NG进程执行所述数据采集任务。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于佳都科技集团股份有限公司,未经佳都科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910736943.3/,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置