[发明专利]一种数据处理方法及装置

说明书

本申请实施例提供一种数据处理方法及装置，通过在满足数据处理条件的情况下，确定记录文件、数据库和存储文件，记录文件用于依次对每一次多笔COMMIT过程进行记录；创建一个内容为空的目标文件；按照数据存入存储文件中的顺序，逐条将存储文件中的数据写入到目标文件，直至将最后一个记录至记录文件中的成功完成的多笔COMMIT过程中的数据全部写入到目标文件，停止将存储文件中的数据写入到目标文件；删除存储文件，将写入存储文件中的数据后的目标文件确定为新的存储文件，并删除所述存储文件，将写入所述存储文件中的数据后的所述目标文件确定为新的存储文件，以及启动执行多笔COMMIT过程的方式，保证了多笔COMMIT时，数据库和存储文件中数据的一致性。

技术领域

本发明涉及计算机领域，特别是涉及一种数据处理方法及装置。

背景技术

批量处理程序运行过程中，每当处理完成预设笔数的数据请求后，便会统一将这预设笔数的数据请求中各数据请求的数据请求结果依次写入数据库和存储文件。即，统一将处理得到多笔数据(数据请求结果)依次写入数据库和存储文件，具体的，是将一笔数据写入数据库和存储文件后，再将下一笔数据写入数据库和存储文件，此过程也可称为多笔COMMIT。

然而，因数据库具有ROLLBACK机制，而文件没有ROLLBACK机制，所以在统一将多笔数据写入数据库和存储文件的过程中(即，在多笔COMMIT过程中)，通常会存在因批量处理程序报错，使得数据库从当前写入数据状态回滚到上一次统一写入成功的状态，而存储文件却停留在当前写入数据状态，进而导致数据库和存储文件中数据不一致的问题。

有鉴于此，提供一种数据处理方法及装置，以保证多笔COMMIT时，数据库和存储文件中数据的一致性，是亟待解决的问题。

发明内容

有鉴于此，本发明的目的在于提供一种数据处理方法及装置，以保证多笔COMMIT时，数据库和存储文件中数据的一致性，具体实施方案如下：

一种数据处理方法，包括：

在满足数据处理条件的情况下，确定记录文件和用于对多笔COMMIT过程中的数据进行存储的数据库和存储文件，所述记录文件用于依次对每一次多笔COMMIT过程进行记录；

创建一个内容为空的目标文件；

按照数据存入所述存储文件中的顺序，逐条将所述存储文件中的数据写入到所述目标文件，直至将最后一个记录至所述记录文件中的成功完成的多笔COMMIT过程中的数据全部写入到所述目标文件，停止将所述存储文件中的数据写入到所述目标文件；

删除所述存储文件，将写入所述存储文件中的数据后的所述目标文件确定为新的存储文件，以及启动执行多笔COMMIT过程。

可选的，所述启动执行多笔COMMIT过程，包括：

启动执行多笔COMMIT过程，并将被删除的所述存储文件中的下一待写入所述目标文件中的数据所属的多笔COMMIT过程，确定为所述启动执行多笔COMMIT过程后，第一个执行的多笔COMMIT过程。

可选的，所述记录文件用于依次对每一次多笔COMMIT过程中的第一个存入所述数据库和存储文件中的数据进行存储；

所述按照数据存入所述存储文件中的顺序，逐条将所述存储文件中的数据写入到所述目标文件，直至将最后一个记录至所述记录文件中的成功完成的多笔COMMIT过程中的数据全部写入到所述目标文件，停止将所述存储文件中的数据写入到所述目标文件，包括：

按照数据存入所述存储文件中的顺序，逐条将所述存储文件中的数据写入到所述目标文件，直至下一待写入所述目标文件中的数据为最后一个存入所述记录文件中的数据时，停止将所述存储文件中的数据写入到所述所述目标文件。