[发明专利]数据处理方法、装置、系统及计算机存储介质

说明书

本申请实施例提供了一种数据处理方法、装置、系统及计算机存储介质，其中，数据处理方法包括：获取对于目标对象的请求信息；根据请求信息生成对应的目标对象的至少两个任务块；将至少两个任务块加入预先设置的多个预读取队列中；利用多个独立线程分别处理多个预读取队列，并行获取目标对象的数据块。因为将任务块加入了预先设置的多个预读取队列中，在读取对应的数据块之时，可以根据多个任务块，并行读取多个目标对象的数据块，提高了读取效率。

技术领域

本申请实施例涉及电子信息技术领域，尤其涉及一种数据处理方法、装置、系统及计算机存储介质。

背景技术

对于分布式数据库而言，数据通常存储在如操作支持系统(英文：OperationSupport Systems，OSS)的远端的节点设备中，在接收到用户的查询请求时，需要从远端的节点设备读取大量数据。但是，在读取数据的过程中，需要按照串行的读取方式依次进行查找读取，耗时长，降低了整体的查询效率，影响用户的查询体验。

发明内容

有鉴于此，本申请实施例提供一种数据处理方法、装置、系统及计算机存储介质，以解决上述部分或全部问题。

根据本申请实施例的第一方面，提供了一种数据处理方法，包括：获取对于目标对象的请求信息；根据请求信息生成对应的目标对象的至少两个任务块，至少两个任务块用于指示获取目标对象的数据块；将至少两个任务块加入预先设置的多个预读取队列中；利用多个独立线程分别处理多个预读取队列，并行获取目标对象的数据块，多个预读取队列与多个独立线程一一对应。

根据本申请实施例的第二方面，提供了一种数据处理装置，包括：获取模块，用于获取对于目标对象的请求信息；任务块适配模块，用于根据请求信息生成对应的目标对象的至少两个任务块，至少两个任务块用于指示获取目标对象的数据块；预读取模块，用于将至少两个任务块加入预先设置的多个预读取队列中；数据块加载模块，用于利用多个独立线程分别处理多个预读取队列，并行获取目标对象的数据块，多个预读取队列与多个独立线程一一对应。

根据本申请实施例的第三方面，提供了一种电子设备，包括：处理器、存储器、通信接口和通信总线，处理器、存储器和通信接口通过通信总线完成相互间的通信；存储器用于存放至少一可执行指令，可执行指令使处理器执行如第一方面的数据处理方法对应的操作。

根据本申请实施例的第四方面，提供了一种数据库系统，包括：电子设备和至少两个节点设备，电子设备为第二方面所描述的数据处理装置，或者电子设备为第三方面所描述的电子设备。

根据本申请实施例的第五方面，提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如第一方面的数据处理方法。

本申请实施例提供的数据处理方法、装置、系统及计算机存储介质，获取对于目标对象的请求信息；根据请求信息生成对应的目标对象的至少两个任务块；将至少两个任务块加入预先设置的多个预读取队列中；利用多个独立线程分别处理多个预读取队列，并行获取目标对象的数据块。因为将任务块加入了预先设置的多个预读取队列中，在读取对应的数据块之时，可以根据多个任务块，并行读取多个目标对象的数据块，提高了读取效率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请实施例中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。

图1为本申请实施例一提供的一种数据处理方法的场景示意图；

图1A为本申请实施例一提供的一种对象存储示意图；

图2为本申请实施例一提供的一种数据处理方法的流程图；

图3为本申请实施例一提供的一种异步多线程并行读取效果示意图；