[发明专利]数据处理方法、装置、电子设备和计算机可读介质在审
申请号: | 202011030741.6 | 申请日: | 2020-09-27 |
公开(公告)号: | CN112100159A | 公开(公告)日: | 2020-12-18 |
发明(设计)人: | 王雨生;郭颖;王博洋 | 申请(专利权)人: | 北京有竹居网络技术有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/2458;G06F16/2457 |
代理公司: | 北京卫智畅科专利代理事务所(普通合伙) 11557 | 代理人: | 陈佳 |
地址: | 101200 北京市平*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 计算机 可读 介质 | ||
本公开的实施例公开了数据处理方法、装置、电子设备和计算机可读介质。该方法的一具体实施方式包括:基于数据库配置信息,对至少一个终端在预设时间窗口内所产生的数据添加指标字段;对已添加指标字段的数据进行指标聚合;将指标聚合后的数据存储到实时分布式搜索和分析引擎中。该实施方式通过根据数据库的配置信息对来自不同终端的数据添加指标字段,简化了后续数据处理过程,提高了数据处理效率。
技术领域
本公开的实施例涉及计算机技术领域,具体涉及数据处理方法、装置、电子设备和计算机可读介质。
背景技术
随着大数据及云计算技术广泛应用以及智能设备的广泛普及,各种终端用户每天可以产生包含各种事件的、海量的数据。对这些拥有细粒度的海量数据进行处理面临着巨大的挑战。为了提取数据中有用的信息,需要对数据中各种指标进行分析。合理的筛选对业务需求有价值的指标,支持指标灵活扩展的数据处理方式,能更方便的挖掘数据中蕴藏的价值。
现有的技术对数据中需要进行分析的各个指标添加独立的指标字段,数据处理效率低且不支持指标的灵活扩展。
发明内容
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
本公开的一些实施例提出了数据处理方法、装置、电子设备和计算机可读介质,来解决以上背景技术部分提到的技术问题。
第一方面,本公开的一些实施例提供了一种数据处理方法,该方法包括:基于数据库配置信息,对至少一个终端在预设时间窗口内所产生的数据添加指标字段;对已添加指标字段的数据进行指标聚合;将指标聚合后的数据存储到实时分布式搜索和分析引擎中。
第二方面,本公开的一些实施例提供了一种数据处理装置,该装置包括:添加单元,被配置成基于数据库配置信息,对至少一个终端在预设时间窗口内所产生的数据添加指标字段;聚合单元,被配置成对已添加指标字段的数据进行指标聚合;存储单元,被配置成将指标聚合后的数据存储到实时分布式搜索和分析引擎中。
第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实现方式描述的方法。
第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现如第一方面中任一实现方式描述的方法。
本公开的上述各个实施例中的一个实施例具有如下有益效果:根据数据库的配置信息,对来自不同终端的数据添加指标字段,简化了后续数据处理过程,提高了数据处理效率。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
图1是根据本公开的一些实施例的数据处理方法的一个应用场景的示意图;
图2是根据本公开的数据处理方法的一些实施例的流程图;
图3是根据本公开的数据处理方法的另一些实施例的流程图;
图4是根据本公开的数据处理装置的一些实施例的结构示意图;
图5是适于用来实现本公开的一些实施例的电子设备的结构示意图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京有竹居网络技术有限公司,未经北京有竹居网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011030741.6/2.html,转载请声明来源钻瓜专利网。