[发明专利]数据采集方法、装置和系统有效

专利信息
申请号: 201710566404.0 申请日: 2017-07-12
公开(公告)号: CN107402869B 公开(公告)日: 2021-01-01
发明(设计)人: 王占 申请(专利权)人: 东软集团股份有限公司
主分类号: G06F11/30 分类号: G06F11/30
代理公司: 北京清亦华知识产权代理事务所(普通合伙) 11201 代理人: 张润
地址: 110179 辽*** 国省代码: 辽宁;21
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 采集 方法 装置 系统
【权利要求书】:

1.一种数据采集方法,其特征在于,包括以下步骤:

获取到访问请求时,采集应用程序的监控数据;所述访问请求是在用户访问应用程序时,所述应用程序生成的;

在所述应用程序对所述访问请求结束响应后,停止所述监控数据的采集,并根据所述监控数据的数据类型,在所述监控数据的指标名中添加对应的后缀;所述后缀,用于将所述监控数据存储时所需采用的数据类型,指示给数据采集器;

根据所述监控数据采用的编程语言,为所述监控数据添加与所述编程语言对应的语言标签,以得到推送数据;所述语言标签用于将所述监控数据的数据格式,指示给所述数据采集器,以使所述数据采集器根据所述语言标签进行数据格式转换;

向所述数据采集器推送所述推送数据;其中,所述数据采集器独立于所述应用程序。

2.根据权利要求1所述的数据采集方法,其特征在于,所述停止所述监控数据的采集之后,还包括:

根据所述监控数据的数据类别,为所述监控数据添加与所述数据类别对应的类别标记;所述类别标记,用于将所述监控数据所需进行的处理流程,指示给所述数据采集器。

3.根据权利要求1或2所述的数据采集方法,其特征在于,所述向所述数据采集器推送所述推送数据,包括:

采用预设传输协议,对所述推送数据进行协议处理;

采用预设的传输方式,将协议处理后的推送数据推送至所述数据采集器。

4.一种数据采集方法,其特征在于,包括以下步骤:

接收探针所推送的推送数据;所述推送数据包括应用程序的监控数据,以及所述监控数据的语言标签;其中,所述探针设置于所述应用程序中;

根据所述监控数据的语言标签,查询所述语言标签对应的数据格式;

根据查询到数据格式,将所述监控数据转换为目标格式;

读取所述监控数据的指标名的后缀;

根据所述后缀,查询配置文件,以确定所述监控数据存储时所需采用的数据类型;

根据确定出的数据类型,对所述监控数据进行数据类型转换。

5.根据权利要求4所述的数据采集方法,其特征在于,所述推送数据还包括所述监控数据的类别标记,所述接收探针所推送的推送数据之后,还包括:

读取所述监控数据的类别标记;

根据所述类别标记,采用对应的处理流程对所述监控数据进行处理。

6.根据权利要求5所述的数据采集方法,其特征在于,所述类别标记包括指标数据、事务数据和异常信息数据中的至少一个;

所述指标数据对应的处理流程包括:对所述监控数据进行缓存;对预设时段内缓存的监控数据进行统计,以得到统计值,其中,所述统计值包括平均值和/或方差;

所述事务数据对应的处理流程包括:对所述监控数据进行扩展和/或添加时间戳;

所述异常信息数据对应的处理流程包括:对所述监控数据进行清洗、压缩和/或添加时间戳。

7.一种数据采集系统,其特征在于,所述系统,包括:

探针,用于执行如权利要求1-3任一项所述的数据采集方法;

数据采集器,用于执行如权利要求4-6任一项所述的数据采集方法。

8.一种数据采集装置,其特征在于,包括:

采集模块,用于获取到访问请求时,采集应用程序的监控数据;所述访问请求是在用户访问应用程序时,所述应用程序生成的;在所述应用程序对所述访问请求结束响应后,停止所述监控数据的采集;

贴标模块,用于根据所述监控数据采用的编程语言,为所述监控数据添加与所述编程语言对应的语言标签,以得到推送数据;所述语言标签用于将所述监控数据的数据格式,指示给数据采集器,以使所述数据采集器根据所述语言标签进行数据格式转换;

推送模块,用于向所述数据采集器推送所述推送数据;其中,所述数据采集器独立于所述应用程序。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东软集团股份有限公司,未经东软集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710566404.0/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top