[发明专利]一种分布式实时计算方法、装置、系统及其存储介质

权利要求书

1.一种分布式实时计算方法，其特征在于，该方法包括：

接收可以被解析为有向无环图的计算逻辑信息；

解析所述计算逻辑信息生成有向无环图，所述有向无环图具有多个节点和连接所述节点的有向边，所述节点用于指示计算逻辑中的数据操作，所述有向边用于指示计算逻辑中的数据流向；

根据所述有向无环图生成计算作业；

将所述计算作业提交至分布式计算集群生成常驻计算任务；

根据实时数据流通过所述计算任务计算得到实时数据结果。

2.根据权利要求1所述的分布式实时计算方法，其特征在于，所述接收可以被解析为有向无环图的计算逻辑信息步骤前，该方法还包括：

将计算作业中的数据操作定义为不同类型的节点；

将所述数据操作的执行顺序定义为数据流向；

根据所述计算作业中的所述节点和所述数据流向架构计算逻辑信息，所述计算逻辑信息可以被解析为有向无环图。

3.根据权利要求2所述的分布式实时计算方法，其特征在于，所述将计算作业中的数据操作定义为不同类型的节点包括：

通过SQL编程语言对所述节点进行定义。

4.根据权利要求2所述分布式实时计算方法，其特征在于，所述将计算作业中的数据操作定义为不同类型的节点包括：

所述数据操作的类型包括数据输入、数据输出、数据计算和/或数据转换。

5.根据权利要求1至4任一项所述的分布式实时计算方法，其特征在于，所述解析所述计算逻辑信息生成有向无环图的步骤后，该方法还包括：

从所述有向无环图中用于数据输入的节点开始对每个所述节点进行遍历；

在遍历过程中判断每个所述节点的类型，将所述数据操作中用于数据输入的节点添加为数据源，所述数据操作中用于数据输出的节点添加为数据输出口。

6.根据权利要求5所述的分布式实时计算方法，其特征在于，在遍历过程中判断每个所述节点的类型，将所述数据操作中用于数据输入的节点添加为数据源，所述数据操作中用于数据输出的节点添加为数据输出口的步骤后，该方法还包括：

判断所述有向无环图是否完成遍历；

如果所述有向无环图完成遍历，根据所述有向无环图生成计算作业；

如果所述有向无环图未完成遍历，跳转到从所述有向无环图中用于数据输入的节点开始对每个所述节点进行遍历的步骤，直到所述有向无环图完成遍历后，根据所述有向无环图生成计算作业。

7.一种分布式实时计算装置，其特征在于，所述装置包括：

接收模块，用于接收可以被解析为有向无环图的计算逻辑信息；

解析模块，用于解析所述计算逻辑信息生成有向无环图，所述有向无环图具有多个节点和连接所述节点的有向边，所述节点用于指示计算逻辑中的数据操作，所述有向边用于指示计算逻辑中的数据流向；

生成模块，用于根据所述有向无环图生成计算作业；

提交模块，用于将所述计算作业提交至分布式计算集群生成常驻计算任务；

计算模块，用于根据实时数据流通过所述计算任务计算得到实时数据结果。

8.根据权利要求7所述的分布式实时计算装置，其特征在于，所述装置进一步还包括：

定义模块，用于将计算作业中的数据操作定义为不同类型的节点，还用于将所述数据操作的执行顺序定义为数据流向；

架构模块，用于根据所述计算作业中的所述节点和所述数据流向架构计算逻辑信息，所述计算逻辑信息可以被解析为有向无环图。

9.根据权利要求8所述的分布式实时计算装置，其特征在于，

所述定义模块，还用于通过SQL编程语言对所述节点进行定义。

10.根据权利要求8的所述的分布式实时计算装置，其特征在于，

所述数据操作的类型包括数据输入、数据输出、数据计算和/或数据转换。