[发明专利]埋点数据处理方法、装置、设备及存储介质在审
申请号: | 201911011717.5 | 申请日: | 2019-10-23 |
公开(公告)号: | CN110727572A | 公开(公告)日: | 2020-01-24 |
发明(设计)人: | 陈高;吴荣平 | 申请(专利权)人: | 江苏满运软件科技有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34;G06F11/36;G06F16/24 |
代理公司: | 11332 北京品源专利代理有限公司 | 代理人: | 孟金喆 |
地址: | 210012 江苏省南京市*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据记录 关键信息 实时查询 数据包 数据库 查询结果 查询请求 存储介质 实时处理 业务需求 用户行为 数据处理 点数据 字段 关联 查询 应用 保证 | ||
1.一种埋点数据处理方法,其特征在于,所述方法包括:
对获取的待测应用的埋点数据包进行实时处理,得到埋点字段的取值;
在埋点数据库中生成包括所述埋点字段的取值的数据记录;
当接收到包括目标关键信息的查询请求时,将所述埋点数据库中与所述目标关键信息关联的数据记录作为查询结果。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述查询结果发送到查询请求关联的客户端,用以在客户端上可视化展示所述查询结果,以及依据查询结果校验埋点数据包。
3.根据权利要求1所述的方法,其特征在于,对获取的待测应用的埋点数据包进行实时处理,得到埋点字段的取值,包括:
将埋点数据库中具有的字段作为埋点字段;
从所述待测应用的埋点数据包中实时提取所述埋点字段的取值。
4.根据权利要求1所述的方法,其特征在于,在埋点数据库中生成包括所述埋点字段的取值的数据记录,包括:
根据待测应用所处环境类型,确定待测应用的埋点数据库;
在确定的埋点数据库中,生成包括所述埋点字段的取值的数据记录。
5.根据权利要求4所述的方法,其特征在于,根据待测应用所处环境类型,确定待测应用的埋点数据库,包括:
若所述待测应用处于测试环境中,则将线下的分布式存储系统ES作为待测应用的埋点数据库;
若所述待测应用处于生产环境中,则将位于线下与线上之间隔离区的Mysql数据库作为待测应用的埋点数据库。
6.根据权利要求1所述的方法,其特征在于,在对获取的待测应用的埋点数据包进行实时处理之前,还包括:
检测所述埋点数据包是否属于预设格式的数据包;若是,则对获取的待测应用的埋点数据包进行实时处理。
7.一种埋点数据处理装置,其特征在于,所述装置包括:
实时处理模块,用于对获取的待测应用的埋点数据包进行实时处理,得到埋点字段的取值;
数据生成模块,用于在埋点数据库中生成包括所述埋点字段的取值的数据记录;
数据查询模块,用于当接收到包括目标关键信息的查询请求时,将所述埋点数据库中与所述目标关键信息关联的数据记录作为查询结果。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
查询结果发送模块,用于将所述查询结果发送到查询请求关联的客户端,用以在客户端上可视化展示所述查询结果,以及依据查询结果校验埋点数据包。
9.根据权利要求7所述的装置,其特征在于,实时处理模块包括:
将埋点数据库中具有的字段作为埋点字段;
从所述待测应用的埋点数据包中实时提取所述埋点字段的取值。
10.根据权利要求7所述的装置,其特征在于,数据生成模块包括:
数据库确定单元,用于根据待测应用所处环境类型,确定待测应用的埋点数据库;
数据记录生成单元,用于在确定的埋点数据库中,生成包括所述埋点字段的取值的数据记录。
11.根据权利要求10所述的装置,其特征在于,数据库确定单元包括:
若所述待测应用处于测试环境中,则将线下的分布式存储系统ES作为待测应用的埋点数据库;
若所述待测应用处于生产环境中,则将位于线下与线上之间隔离区的Mysql数据库作为待测应用的埋点数据库。
12.根据权利要求7所述的装置,其特征在于,所述装置还包括:
数据包格式检测模块,用于在对获取的待测应用的埋点数据包进行实时处理之前,检测所述埋点数据包是否属于预设格式的数据包;若是,则对获取的待测应用的埋点数据包进行实时处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏满运软件科技有限公司,未经江苏满运软件科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911011717.5/1.html,转载请声明来源钻瓜专利网。