[发明专利]工业设备数据的清洗方法、装置、电子设备及存储介质

说明书

本发明提供一种工业设备数据的清洗方法、装置、电子设备及计算机可读存储介质，涉及数据处理技术领域。所述方法包括：接收工业设备所采集的待清洗数据；根据所述待清洗数据及数据清洗需求从预设的策略库获取对应的数据清洗策略，其中，数据清洗策略由标签语言实现；运行所述数据清洗策略处理所述待清洗数据，得到清洗后数据。以至少解决相关技术中存在的对工业设备采集的数据进行定制化开发和配置导致人工成本高且开发周期长、数据应用效率低的问题。适应于数据处理、数据清洗、数据分析等场景。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种工业设备数据的清洗方法、装置、电子设备及计算机可读存储介质。

背景技术

当前，工业设备采集的数据与可被工业应用直接消费的数据，两者在数据结构、逻辑关系、类型精度等方面存在显著差异。因此，工业应用通常对工业设备采集的数据进行定制化开发，或定制化配置以解决数据差异问题。

然而，定制化开发或定制化配置导致人工成本高，且不同类型不同厂家的设备数据需要与之匹配的定制化开发产品，故开发周期长、开发产品数量多，将导致数据应用效率低。

发明内容

本发明所要解决的技术问题是针对现有技术的上述不足，提供一种工业设备数据的清洗方法、装置、电子设备及计算机可读存储介质，以至少解决相关技术中存在的对工业设备采集的数据进行定制化开发和配置导致人工成本高且开发周期长、数据应用效率低的问题。

第一方面，本发明提供一种工业设备数据的清洗方法，包括：接收工业设备所采集的待清洗数据；根据所述待清洗数据及数据清洗需求从预设的策略库获取对应的数据清洗策略，其中，数据清洗策略由标签语言实现；运行所述数据清洗策略处理所述待清洗数据，得到清洗后数据。

优选地，在根据所述待清洗数据及数据清洗需求从预设的策略库获取对应的数据清洗策略之前，所述清洗方法还包括：创建数据清洗策略。

优选地，所述创建数据清洗策略，具体包括：定义数据清洗策略的基本信息，基本信息包括标识、用途；采用标签语言编辑数据清洗策略的处理逻辑，得到数据清洗策略；测试得到的数据清洗策略是否满足用途；响应于得到的数据清洗策略满足用途，将得到的数据清洗策略存储至预设的策略库，其中，预设的策略库中存储有多个数据清洗策略。

优选地，所述运行所述数据清洗策略处理所述待清洗数据，具体包括：将所述数据清洗策略进行加载并创建实例化对象；实例化对象将所述待清洗数据进行初始化；根据所述数据清洗策略处理初始化后的所述待清洗数据。

优选地，在所述运行所述数据清洗策略处理所述待清洗数据之后，所述清洗方法还包括：响应于超过预设时长未接收到工业设备所采集的待清洗数据，销毁实例化对象并卸载所述数据清洗策略。

第二方面，本发明还提供一种工业设备数据的清洗装置，包括接收模块、获取模块和策略执行器。

接收模块，用于接收工业设备所采集的待清洗数据。

获取模块，与接收模块连接，用于根据所述待清洗数据及数据清洗需求从预设的策略库获取对应的数据清洗策略，其中，数据清洗策略由标签语言实现。

策略执行器，与接收模块和获取模块连接，用于运行所述数据清洗策略处理所述待清洗数据，得到清洗后数据。

优选地，所述清洗装置还包括策略编辑器和策略库。

策略编辑器，用于创建数据清洗策略。

策略库，用于存储数据清洗策略。

优选地，策略编辑器包括定义模块、编辑模块和测试模块。

定义模块，用于定义数据清洗策略的基本信息，基本信息包括标识、用途。

编辑模块，与定义模块连接，用于采用标签语言编辑数据清洗策略的处理逻辑，得到数据清洗策略。