[发明专利]一种大数据采集系统和方法在审
申请号: | 201910013743.5 | 申请日: | 2019-01-07 |
公开(公告)号: | CN109739921A | 公开(公告)日: | 2019-05-10 |
发明(设计)人: | 王江;胡湿;黄福鑫 | 申请(专利权)人: | 北京云基数技术有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/22 |
代理公司: | 北京细软智谷知识产权代理有限责任公司 11471 | 代理人: | 王金宝 |
地址: | 100020 北京市朝*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种大数据采集系统和方法,所述大数据采集系统包括:数据采集模块、数据汇聚模块和数据接收模块;所述数据采集模块包括一个或多个agent单元;所述agent单元部署在要采集的数据设备上,所述agent单元用于采集运行数据,并将该数据发送给数据汇聚模块进行聚合和预处理;所述数据接收模块用于接收数据汇聚模块上传的处理数据,并对该数据进行加工处理,并将处理后的数据进行存储和展示;本发明的系统通过数据汇聚模块对采集的数据进行预处理,能够降低数据传输量和传输频率,便于数据更稳定的传送给数据接收模块;通过在数据采集模块上设置存储单元,能够降低数据泄露和丢失的概率,有利于提高采集系统的安全性。 | ||
搜索关键词: | 采集系统 数据采集模块 数据汇聚模块 数据接收模块 大数据 预处理 采集 采集运行数据 设置存储单元 数据传输量 处理数据 传输频率 汇聚模块 接收数据 数据设备 数据泄露 数据发 上传 聚合 存储 概率 部署 展示 | ||
【主权项】:
1.一种大数据采集系统,其特征在于,包括:数据采集模块、数据汇聚模块和数据接收模块;其中,所述数据采集模块包括:一个或多个agent单元;所述agent单元部署在要采集的数据设备上,所述数据设备上的每一个应用软件与一个所述agent单元相对应,所述agent单元用于采集与其相对应的应用软件的运行数据,并将该采集数据发送给所述数据汇聚模块进行数据聚合和预处理,并将预处理后的数据发送给所述数据接收模块;数据接收模块,用于接收所述数据汇聚模块上传的处理后数据,对该数据进行加工处理,并将处理后的数据进行存储和展示。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京云基数技术有限公司,未经北京云基数技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910013743.5/,转载请声明来源钻瓜专利网。
- 上一篇:一种房地产信息管理系统
- 下一篇:一种工业数据智能分析系统