[发明专利]一种数据存储方法及装置

说明书

本发明实施例提供了一种数据存储方法，该方法包括：从原始存储空间对应被分配的队列中读取待处理数据，对待处理数据进行处理，得到待存储数据；判断目的存储空间是否为可用状态；若不是可用状态，则将待存储数据存储至原始存储空间；若是可用状态，则将待存储数据存储至目的存储空间。这样，当目的存储空间不可用时，可以将待存储数据存储至原始存储空间，不会占用系统的内存，同时，对原始存储空间所存储的数据，也可以继续进行读取，从而可以减少数据淤积在原始存储空间的现象。

技术领域

本发明涉及数据处理技术领域，特别是涉及一种数据存储方法及装置。

背景技术

数据处理系统需要对大量的数据进行处理，在数据处理过程中，首先，从原始存储空间读取数据，然后，对数据进行分析处理，再将处理后的数据存储至目的存储空间。

一些情况下，在存储处理后的数据时可能发生故障，处理后的数据无法存储至目的存储空间。在这种情况下，如果继续从原始存储空间读取数据，数据处理后无法存储至目的存储空间，占用数据处理系统的内存，将会导致数据处理系统内存耗尽。

目前，相关技术中，当出现数据存储故障时，会暂停对数据的读取，直到数据存储故障被修复之后，再从原始存储空间读取数据。

但是，在上述方法中，旧的数据仍然存储在原始存储空间，而新获取的数据不断添加至数据存储队列的尾部，将导致大量数据淤积在原始存储空间，数据处理系统将面临很大的压力。

发明内容

本发明实施例的目的在于提供一种数据存储方法及装置，以减少数据淤积现象。具体技术方案如下：

本发明实施例提供了一种数据存储方法，所述方法包括：

从原始存储空间对应被分配的队列中读取待处理数据，对所述待处理数据进行处理，得到待存储数据；

判断目的存储空间是否为可用状态；

若不是可用状态，则将所述待存储数据存储至所述原始存储空间；

若是可用状态，则将所述待存储数据存储至所述目的存储空间；

返回所述从原始存储空间对应被分配的队列中读取待处理数据的过程。

可选的，所述从原始存储空间对应被分配的队列中读取待处理数据，对所述待处理数据进行处理，得到待存储数据的步骤，包括：

从原始存储空间对应被分配的队列中读取第一数据；

判断所述第一数据是否已被处理；

若否，则对作为待处理数据的所述第一数据进行处理，得到待存储数据；

若是，则在所述目的存储空间不为可用状态时，将所述第一数据存储至所述原始存储空间；在所述目的存储空间为可用状态时，将所述第一数据存储至所述目的存储空间。

可选的，所述对所述待处理数据进行处理，得到待存储数据，包括：

将所述待处理数据处理为具有预设格式和/或预设字段的待存储数据。

可选的，所述从原始存储空间对应被分配的队列中读取待处理的待处理数据，包括：

从原始存储空间对应被分配的队列头部读取待处理数据；

所述将所述待存储数据存储至所述原始存储空间，包括：

将所述待存储数据存储至所述原始存储空间对应被分配的队列尾部。

本发明实施例还提供了一种数据存储装置，所述装置包括：

读取模块，用于从原始存储空间对应被分配的队列中读取待处理数据，对所述待处理数据进行处理，得到待存储数据；