[发明专利]一种数据查询方法、装置及电子设备在审
申请号: | 201910837642.X | 申请日: | 2019-09-05 |
公开(公告)号: | CN110688416A | 公开(公告)日: | 2020-01-14 |
发明(设计)人: | 李锦沂 | 申请(专利权)人: | 深圳市中电数通智慧安全科技股份有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/2455 |
代理公司: | 44372 深圳市六加知识产权代理有限公司 | 代理人: | 许铨芬 |
地址: | 518000 广东省深圳市龙*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例涉及互联网技术领域,公开了一种数据查询方法,应用于数据查询系统,该系统包括Kafka和Kylin,该方法通过数据抓取工具将源端的数据抓取至Kafka,然后Kafka将所述源端的数据转化为JSON格式的数据,接着通过Kylin定义数据模型的维度和聚合维度,然后Kylin能够根据所述JSON格式的数据和所述数据模型,生成聚合数据,最后通过SQL语句查询所述聚合数据,本发明提供的数据查询方法能够对海量数据进行快速查询。 | ||
搜索关键词: | 聚合数据 数据查询 数据抓取 维度 数据查询系统 互联网技术 定义数据 海量数据 快速查询 数据模型 数据转化 聚合 查询 应用 | ||
【主权项】:
1.一种数据查询方法,其特征在于,应用于数据查询系统,该系统包括Kafka和Kylin,所述方法包括:/n通过数据抓取工具将源端的数据抓取至Kafka;/n通过Kafka将所述源端的数据转化为JSON格式的数据;/n通过Kylin定义数据模型的维度和聚合维度;/n根据所述JSON格式的数据和所述数据模型,生成聚合数据;/n通过SQL语句查询所述聚合数据。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市中电数通智慧安全科技股份有限公司,未经深圳市中电数通智慧安全科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910837642.X/,转载请声明来源钻瓜专利网。