[发明专利]批量数据的处理方法、装置及电子设备

说明书

本申请公开了一种批量数据的处理方法、装置及电子设备，其中，方法包括：获取待处理的批量元数据；对批量元数据进行解析，以确定批量元数据所属的业务场景、各个元数据的采集时间及数据类型；根据业务场景、各个元数据的采集时间及数据类型，确定第一数据处理模式；基于第一数据处理模式，对批量元数据进行处理。由此，根据批量元数据所属的业务场景、各个元数据的采集时间及数据类型，对批量元数据进行处理，从而不仅实现了针对不同业务场景进行批量元数据的处理、提高了数据处理的可靠性，而且有利于减少人工处理环节、降低人力成本。

技术领域

本申请涉及计算机技术领域，尤其涉及一种批量数据的处理方法、装置、电子设备、存储介质和计算机程序产品。

背景技术

随着大数据和人工智能的发展，两者的关系也越来越密切，大数据及人工智能的落地离不开海量数据的支持。能源工业领域的大数据是指从各种异构源中获取的大量结构化、半结构化和非结构化数据。该数据通常被认为具有隐藏在它的有价值的信息，但是需要大量的精力和资源去采集及处理。

在能源工业领域，对应用场景制作数据集的真实性和可靠性有很高的要求。因此，在获取到不同应用场景下的原始数据时，如何较为可靠地制作出满足需求的数据集，是当前完善能源工业控制智能化建设的关键所在。而相关技术中，缺乏针对不同业务场景下的批量数据处理，从而导致批量数据处理的可靠性较低。

发明内容

本申请提供一种批量数据的处理方法、装置及电子设备。

根据本申请的第一方面，提供了一种批量数据的处理方法，包括：

获取待处理的批量元数据；

对所述批量元数据进行解析，以确定所述批量元数据所属的业务场景、各个元数据的采集时间及数据类型；

根据所述业务场景、各个元数据的采集时间及数据类型，确定第一数据处理模式；

基于所述第一数据处理模式，对所述批量元数据进行处理。

根据本申请的第二方面，提供了一种批量数据的处理装置，包括：

第一获取模块，用于获取待处理的批量元数据；

第一确定模块，用于对所述批量元数据进行解析，以确定所述批量元数据所属的业务场景、各个元数据的采集时间及数据类型；

第二确定模块，用于根据所述业务场景、各个元数据的采集时间及数据类型，确定第一数据处理模式；

第一处理模块，用于基于所述第一数据处理模式，对所述批量元数据进行处理。

根据本申请的第三方面，提供了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述一方面实施例所述的批量数据的处理方法。

根据本申请的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其上存储有计算机程序，所述计算机指令用于使所述计算机执行上述一方面实施例所述的批量数据的处理方法。

根据本申请的第五方面，提供了一种计算机程序产品，所述计算机程序被处理器执行时，实现上述一方面实施例所述的批量数据的处理方法。

本申请的技术方案，根据批量元数据所属的业务场景、各个元数据的采集时间及数据类型，对批量元数据进行处理，从而不仅实现了针对不同业务场景进行批量元数据的处理、提高了数据处理的可靠性，而且有利于减少人工处理环节、降低人力成本。

应当理解，本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征，也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。

附图说明