[发明专利]一种数据实时计算方法、装置和存储介质

说明书

本申请公开了一种数据实时计算方法、装置和存储介质，其中方法包括：接收用户输入的用于对数据进行处理的结构化查询语言指令，根据所述结构化查询语言指令生成能够由分布式计算引擎处理的多个数据计算单元，其中所述分布式计算引擎支持对数据的实时计算，以及利用所述分布式计算引擎对所述多个数据计算单元进行分布式计算。通过本实施例，可以提高数据实时计算的计算效率。

技术领域

本申请涉及大数据领域，特别是涉及一种数据实时计算方法、装置和存储介质。

背景技术

随着互联网技术的高速发展，根据实时产生的大量数据诞生了实时计算的概念，并同时发展出诸多数据的实时计算的解决方法。目前数据实时计算的方法大多基于基础技术框架，比如strorm、spark streaming等，在基于该种框架的实时计算方法往往对代码编写人员的要求较高且数据运算的效率不高，无法有效的满足高要求的数据计算。

本公开的实施例提供了一种数据实时计算方法、装置和存储介质，以提高数据实时计算的计算效率。

发明内容

本公开的实施例提供了一种数据实时计算方法、装置和存储介质，以提高数据实时计算的计算效率。

为解决上述技术问题，本发明实施例是这样实现的：

第一方面，本公开实施例提供了一种数据实时计算方法，包括：

接收用户输入的用于对数据进行处理的结构化查询语言指令；

根据所述结构化查询语言指令生成能够由分布式计算引擎处理的多个数据计算单元，其中所述分布式计算引擎支持对数据的实时计算；以及

利用所述分布式计算引擎对所述多个数据计算单元进行分布式计算。

第二方面，本公开实施例还提供了一种存储介质，存储介质包括存储的程序，其中，在程序运行时由处理器执行如上述第一方面所述的数据实时计算方法。

第三方面，根据本公开实施例还提供了一种数据实时计算装置，包括：

语言指令接收模块，用于接收用户输入的用于对数据进行处理的结构化查询语言指令；

数据单元生成模块，用于根据所述结构化查询语言指令生成能够由分布式计算引擎处理的多个数据计算单元，其中所述分布式计算引擎支持对数据的实时计算；以及

数据单元计算模块，用于利用所述分布式计算引擎对所述多个数据计算单元进行分布式计算。

第四方面，本公开实施例还提供了一种数据实时计算装置，包括：

处理器；以及

存储器，与所述处理器连接，用于为所述处理器提供处理以下处理步骤的指令：

接收用户输入的用于对数据进行处理的结构化查询语言指令；

根据所述结构化查询语言指令生成能够由分布式计算引擎处理的多个数据计算单元，其中所述分布式计算引擎支持对数据的实时计算；以及

利用所述分布式计算引擎对所述多个数据计算单元进行分布式计算。

本发明实施例中，接收用户输入的用于对数据进行处理的结构化查询语言指令，根据结构化查询语言指令生成能够由分布式计算引擎处理的多个数据计算单元，其中分布式计算引擎支持对数据的实时计算；以及利用分布式计算引擎对多个数据计算单元进行分布式计算。本发明通过将用户输入的结构化查询语言指令生成能够由分布式计算引擎处理的多个数据计算单元，利用分布式计算引擎同时计算多个数据计算单元，从而提高数据实时计算的计算效率。

附图说明