[发明专利]数据处理方法、边缘节点、数据中心及存储介质

说明书

本申请实施例提供一种数据处理方法、边缘节点、数据中心及存储介质；所述方法包括：从数据源收集待处理的数据流；对所述数据流中的数据进行处理，得到处理结果；确定所述数据流中当前已处理且未上报数据作为待上报数据；当所述待上报数据的数据信息满足特定的分割阈值时，将数据信息满足所述分割阈值的待上报数据确定为当前批次数据；将所述当前批次数据的处理结果上报至数据中心，以使所述数据中心对所述处理结果进行处理，得到所述数据流的目标处理结果；这样，通过对数据进行初步处理，使数据中心对上传的处理结果进行再次处理，即可得到目标处理结果，缩短了数据中心处理整个数据流的处理时间。

技术领域

本申请涉及云计算领域，尤其涉及数据处理方法、边缘节点、数据中心及存储介质。

背景技术

在相关技术中，由于大数据分析平台始终是一个中心化的节点，因此所有的数据收集的节点都需要将数据发送到大数据分析平台的数据中心，这一传输链路的数据量就会很大，同时数据中心存储的原始数据也会很大；这样大量的原始数据使得数据计算耗时较久。

发明内容

本申请实施例提供一种数据处理方法、边缘节点、数据中心及存储介质，通过对数据进行初步处理，使数据中心对上传的处理结果进行再次处理，即可得到目标处理结果，缩短了数据中心处理整个数据流的处理时间。

本申请实施例的技术方案是这样实现的：

第一方面，本申请实施例提供一种数据处理方法，包括：从数据源收集待处理的数据流；对所述数据流中的数据进行处理，得到处理结果；确定所述数据流中当前已处理且未上报数据作为待上报数据；当所述待上报数据的数据信息满足特定的分割阈值时，将数据信息满足所述分割阈值的待上报数据确定为当前批次数据；将所述当前批次数据的处理结果上报至数据中心，以使所述数据中心对所述处理结果进行处理，得到所述数据流的目标处理结果。

第二方面，本申请实施例提供一种数据处理方法，包括：接收边缘节点上传的待处理的数据流中多批次数据的处理结果；其中，每一批次数据的数据信息均满足分割阈值；确定所述数据流的待实现的功能；根据所述待实现的功能，对所述多批次数据的处理结果进行处理，得到所述数据流的目标处理结果。

第三方面，本申请实施例提供一种边缘节点，所述边缘节点包括：第一收集模块，用于从数据源收集待处理的数据流；第一处理模块，用于对所述数据流中的数据进行处理，得到处理结果；第一确定模块，用于确定所述数据流中当前已处理且未上报数据作为待上报数据；第二确定模块，用于当所述待上报数据的数据信息满足特定的分割阈值时，将数据信息满足所述分割阈值的待上报数据确定为当前批次数据；第一上报模块，用于将所述当前批次数据的处理结果上报至数据中心，以使所述数据中心对所述处理结果进行处理，得到所述数据流的目标处理结果。

第四方面，本申请实施例提供一种数据中心，所述数据中心包括：第一接收模块，用于接收边缘节点上传的待处理的数据流中多批次数据的处理结果；其中，每一批次数据的数据信息均满足分割阈值；第三确定模块，用于确定所述数据流的待实现的功能；第二处理模块，用于根据所述待实现的功能，对所述多批次数据的处理结果进行处理，得到所述数据流的目标处理结果。

第五方面，本申请实施例提供一种存储介质，存储有可执行指令，用于引起处理器执行时，实现上述第一方面提供的数据处理方法，或者，用于引起处理器执行时，实现上述第二方面提供的数据处理方法。

本申请实施例具有以下有益效果：当从数据源收集到的数据时，即开始对数据处理，并且当已处理且未上报数据的数据信息满足分割阈值时，将已处理且未上报数据作为为当前批次数据，将当前批次数据的处理结果上报到数据中心；这样，每当处理完一个批次数据就将处理结果上报到数据中心，能够减少数据传输量，而且数据中心通过对处理结果进行再次处理，即可得到目标处理结果，大大缩短了数据中心处理整个数据流的处理时间。

附图说明