[发明专利]生产数据存储方法、存储装置、电子设备及存储介质

说明书

本公开提供了一种生产数据存储方法、存储装置、电子设备及存储介质。该方法包括：在将生产数据写入存储系统之前，将生产数据发送至新创建的消息队列中；从消息队列中获取多个生产数据，其中，每个生产数据包括属性名称以及与属性名称对应的属性值；将多个生产数据中的属性名称相同的属性值按照预设合并规则进行合并，得到与属性名称对应的存储集合；以及将与属性名称对应的存储集合存储至存储系统。

技术领域

本公开涉及计算机技术领域，更具体地，涉及一种生产数据存储方法、生产数据存储装置、电子设备、计算机可读存储介质以及计算机程序产品。

背景技术

随着计算机技术的发展，生产过程中产生的生产数据愈发增多，快递等网商平台对于生产过程数据的采集、存储与监控的要求越来越高。目前的生产数据采集系统大多单纯的使用实时数据库进行采集和存储。

在实现本公开构思的过程中，发明人发现相关技术中至少存在如下问题：生产数据的存储效率较低。

发明内容

有鉴于此，本公开提供了一种生产数据存储方法、生产数据存储装置、电子设备、计算机可读存储介质以及计算机程序产品。

本公开的一个方面提供了一种生产数据存储方法，包括：

在将生产数据写入存储系统之前，将上述生产数据发送至新创建的消息队列中；

从上述消息队列中获取多个生产数据，其中，每个上述生产数据包括属性名称以及与上述属性名称对应的属性值；

将多个上述生产数据中的上述属性名称相同的上述属性值按照预设合并规则进行合并，得到与上述属性名称对应的存储集合；以及

将与上述属性名称对应的上述存储集合存储至上述存储系统。

根据本公开的实施例，生产数据存储方法还包括：

获取多个生产数据表；

利用日志抽取工具从每个上述生产数据表中获取初始生产数据；以及

对每个上述初始生产数据进行预处理，得到多个上述生产数据。

根据本公开的实施例，上述预处理包括以下至少一项：数据清洗、逻辑加工、数据封装、数据统计和数据压缩。

根据本公开的实施例，上述生产数据是由服务器根据数据产生时间点间隔生成的且具有分类标识的数据；

其中，上述将多个上述生产数据中的上述属性名称相同的上述属性值按照预设合并规则进行合并，得到与上述属性名称对应的存储集合，包括：

对每一个上述属性名称以及与上述属性名称对应的属性值进行数据转换，得到多个第一属性名称以及与上述第一属性名称对应的第一属性值；

根据每种上述分类标识，从对应于不同的上述生产数据的多个上述第一属性名称以及对应于每个上述第一属性名称的上述第一属性值中，确定具有相同上述分类标识的上述第一属性名称以及对应于每个上述第一属性名称的上述第一属性值；

根据上述数据产生时间点，从具有相同上述分类标识的多个上述第一属性名称以及对应于每个上述第一属性名称的上述第一属性值中，确定目标属性名称以及对应于上述目标属性名称的上述目标属性值；以及

对具有不同上述分类标识的上述目标属性信息对应的上述目标属性值进行合并，得到上述存储集合。

根据本公开的实施例，上述数据产生时间点包括第一时间点和第二时间点，上述第二时间点的时间早于上述第一时间点的时间；

其中，上述根据上述数据产生时间点，从具有相同上述分类标识的多个上述第一属性信息以及对应于每个上述第一属性信息的上述目标属性值中，确定目标属性名称以及对应于上述目标属性名称的上述目标属性值，包括：