[发明专利]一种数据关联分析的方法、平台、电子设备及存储介质在审
申请号: | 201911425517.4 | 申请日: | 2019-12-31 |
公开(公告)号: | CN111159203A | 公开(公告)日: | 2020-05-15 |
发明(设计)人: | 郭庆;李秋实;谢莹莹;于宏亮 | 申请(专利权)人: | 中科曙光国际信息产业有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2455;G06F16/242;G06F16/27 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 曹瑞敏 |
地址: | 266000 山东省青岛市*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 关联 分析 方法 平台 电子设备 存储 介质 | ||
本申请提供一种数据关联分析的方法、平台、电子设备及存储介质。由于对数据采用的聚合及索引能够得到与采用数据关联分析算法大致相同的结果,故通过将语法树中用于描述数据关联分析算法的节点替换成用于描述数据聚合索引的节点,那么在根据替换后的语法树执行时,便可以绕开执行数据关联分析算法而执行数据的聚合及索引。由于聚合及索引较于数据关联分析算法的计算量小很多,故以小计算量实时的计算并得到与采用数据关联分析算法大致相同的分析结果,从而实现在线实时的进行数据关联分析。
技术领域
本申请涉及计算机技术领域,具体而言,涉及一种数据关联分析的方法、平台、电子设备及存储介质。
背景技术
当前,随着技术的不断发展,设备性能的不断提升,大数据的数据分析技术已成熟,并且在各种场景都开始应用。
在大数据的数据分析技术中,可以采用数据关联分析算法来对数据库中大量的数据进行关联分析,以确定出用户需要的且相互之间具备关联的数据。但是采用数据关联分析算法来进行关联分析的计算量很大,计算量大则会造成设备的性能瓶颈,导致其通常在离线状态下才能进行数据关联分析,而对于在线实时的数据关联分析,则无法实现。
发明内容
本申请实施例的目的在于提供一种数据关联分析的方法、平台、电子设备及存储介质,用以实现在线实时的进行数据关联分析。
第一方面,本申请实施例提供了一种数据关联分析的方法,所述方法包括:
接收客户端发送的数据关联分析请求;根据所述数据关联分析请求,生成用于描述数据关联分析的SQL语句;构建出所述SQL语句对应的语法树;将所述语法树中用于描述数据关联分析算法的节点替换成用于描述数据聚合索引的节点,获得替换后的语法树;利用所述替换后的语法树进行数据的聚合及索引,获得数据关联分析的结果,并将所述结果反馈给所述客户端。
在本申请实施例中,由于对数据采用的聚合及索引能够得到与采用数据关联分析算法大致相同的结果,故通过将语法树中用于描述数据关联分析算法的节点替换成用于描述数据聚合索引的节点,那么在根据替换后的语法树执行时,便可以绕开执行数据关联分析算法而执行数据的聚合及索引。由于聚合及索引较于数据关联分析算法的计算量小很多,故以小计算量实时的计算并得到与采用数据关联分析算法大致相同的分析结果,从而实现在线实时的进行数据关联分析。
结合第一方面,在第一种可能的实现方式中,将所述语法树中用于描述数据关联分析算法的节点替换成用于描述数据聚合索引的节点,获得替换后的语法树,包括:
将所述语法树中用于描述所述算法的执行以及所述算法执行结果的推送的节点,替换成用于描述数据索引子句的执行以及数据聚合子句的执行的节点。
在本申请实施例中,由于替换的是执行数据索引的子句以及数据聚合的子句,故利用替换后的语法树中的子句可以直接执行数据的聚合及索引,能够进一步提高数据的聚合及索引执行效率。
结合第一方面,在第二种可能的实现方式中,将所述语法树中用于描述数据关联分析算法的节点替换成用于描述数据聚合索引的节点,获得替换后的语法树,包括:
利用预设的分析替换规则分析所述语法树,确定出用于描述所述数据关联分析算法的节点;基于所述分析替换规则,将用于描述所述数据关联分析算法的节点替换成用于描述所述数据聚合索引的节点。
在本申请实施例中,由于语法树是基于SQL语句构建,故利用SQL语句的预设语义分析能够准确的找到描述数据关联分析算法的节点。
结合第一方面的第二种可能的实现方式,在第三种可能的实现方式中,所述方法应用于数据分析平台,在基于所述分析替换规则,将用于描述所述数据关联分析算法的节点替换成用于描述所述数据聚合索引的节点之前,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中科曙光国际信息产业有限公司,未经中科曙光国际信息产业有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911425517.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种含噻吩连体化合物的锂离子电池电解液
- 下一篇:一种语音编辑方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置