[发明专利]一种基于窗口函数的实时工业数据切分方法

权利要求书

1.一种基于窗口函数的实时工业数据切分方法，其特征在于：包括如下步骤：

步骤1：用户根据自身具体业务场景确定是否对采集的实时流数据按照key分组策略进行分组过滤；

步骤2：当确定对采集的实时流数据不按照key分组策略进行分组过滤时，选择WindowAll窗口算子对实时流数据进行数据预处理，预处理后的实时数据流传递给下游窗口算子进行切分处理；

步骤3：当确定对采集的实时流数据按照key分组策略进行分组过滤时，进而选择KeyedWindow窗口算子对实时流数据按照key分组策略进行分组，分组后的实时数据流由窗口适配器分发给下游窗口算子进行数据切分处理。

2.根据权利要求1所述的一种基于窗口函数的实时工业数据切分方法，其特征在于：所述实时流数据通过接入网关对工业现场终端设备进行采集，并通过消息队列的发布订阅机制进行数据传送。

3.根据权利要求1所述的一种基于窗口函数的实时工业数据切分方法，其特征在于：所述步骤2具体步骤如下：

将对实时流数据进行预处理，预处理完成后，将所有预处理后的数据发送给下游的单个实例窗口函数，当满足窗口触发条件后，对窗口内的数据使用窗口处理函数进行数据计算处理，输出窗口的结果值。

4.根据权利要求3所述的一种基于窗口函数的实时工业数据切分方法，其特征在于：所述预处理方法，包括：将实时流数据字段值进行补全，并按照时间排序。

5.根据权利要求1所述的一种基于窗口函数的实时工业数据切分方法，其特征在于：步骤3具体步骤如下：

按业务场景构建元数据模型，对元数据模型语义描述，获得元数据模型标签；

根据用户数据需求，定制分组关键字key；

解析实时流数据中标签，进行分别对key和实时流数据的标签进行hash，将hash值一致的实时流数据分为一组；

通过窗口适配器把分组后的实时流数据的元素分配到对应的窗口，当满足窗口触发条件后，对窗口内的数据使用窗口处理函数进行数据计算处理，输出窗口的结果值。

6.根据权利要求3或5所述的一种基于窗口函数的实时工业数据切分方法，其特征在于：所述窗口处理函数至少包括Window Function、Reduce Function、Fold Function其中之一。