[发明专利]数据读写批量处理方法、服务器及计算机可读存储介质

说明书

本发明涉及一种数据处理技术，揭露了一种数据读写批量处理方法，该方法包括：当从调用方接收到针对单数据库或多数据库的批量数据读写请求时，为每个读写请求分别分配唯一的请求ID；在hash内存中创建针对每个所述读写请求的存储结构，包括关键字和value结构，将请求ID写入关键字中，将调用方的连接标示、读写sql语句及读写sql编号写入value结构中；根据每个所述读写请求中的数据库标识将所述读写请求的各个读写任务发送至对应的数据库并行处理；接收数据库返回的处理结果并更新至所述读写请求对应的所述value结构中。本发明还提供一种服务器及计算机可读存储介质。本发明能够对批量读写任务进行并行处理，减少访问耗时。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据读写批量处理方法、服务器及计算机可读存储介质。

背景技术

目前，在涉及单数据库或多个数据库批量数据读写时，无法做完美处理。针对单数据库批量读写，目前大多数做法是处理模块先执行一个sql任务，等数据库处理返回后，再执行下一个sql任务。若其中读或写处理失败则返回给调用方。针对多数据库批量读写，目前的大多数做法是处理模块先确定第一个sql任务对应的数据表是在哪个数据库，再从该数据库中执行该sql任务，等数据返回后再确定第二个sql任务对应的数据表是在哪个数据库，以此类推，若其中一个sql任务执行失败则返回给调用方。

以上方式的缺陷在于，多个sql任务之间并无先后执行关系，但目前做法为方便简单处理进行顺序执行，耗时过长。并且，每多一类读写均需增加逻辑代码维护，增加人工成本。

发明内容

有鉴于此，本发明提出一种数据读写批量处理方法、服务器及计算机可读存储介质，以解决至少一个上述技术问题。

首先，为实现上述目的，本发明提出一种数据读写批量处理方法，该方法包括步骤：

当从调用方接收到针对单数据库或多数据库的批量数据读写请求时，为每个读写请求分别分配唯一的请求ID，所述读写请求中的请求参数包含数据库标识和读写任务，其中每个读写任务包括一个读写sql编号及需要执行的读写sql语句；

在hash内存中创建针对每个所述读写请求的存储结构，包括关键字和value结构，将所述请求ID写入所述关键字中，并将每个所述读写请求对应的调用方的连接标示、以及所述读写请求中每个读写任务对应的读写sql语句及读写sql编号作为数组，写入所述value结构中；

根据每个所述读写请求中的数据库标识将所述读写请求的各个读写任务发送至对应的数据库并行处理；及

接收数据库返回的针对每个所述读写请求的各个读写任务的处理结果并更新至所述读写请求对应的所述value结构中。

可选地，该方法还包括步骤：

根据所述value结构，判断所述读写请求的读写任务是否已全部返回处理结果；

当所述读写请求的读写任务已全部返回处理结果时，组合所述读写请求的所有读写任务的处理结果并返回给调用方。

可选地，在所述根据每个所述读写请求中的数据库标识将所述读写请求的各个读写任务发送至对应的数据库并行处理的步骤中，发送给每个数据库的读写任务数据包含请求ID、读写sql编号、读写sql语句。

可选地，所述处理结果包括请求ID、读写sql编号、任务返回标识和任务返回数据。

可选地，所述value结构中还包括每个读写任务对应的任务返回标识和任务返回数据，所述接收数据库返回的针对所述读写请求的各个读写任务的处理结果并更新至所述读写请求对应的所述value结构中的步骤包括：