[发明专利]一种基于RDMA的数据处理方法、装置和介质

说明书

本发明实施例公开了一种基于RDMA的数据处理方法、装置和计算机可读存储介质，将接收到的数据任务存储至相应的事务处理队列中，并为数据任务分配对应的线程；以所有事务处理队列中的任意一个事务处理队列即目标事务队列为例，可以对目标事务处理队列执行轮询操作，依次将目标事务处理队列中的数据任务放入本地缓存，从而可以有效地终止NVMe事务，节省DRAM带宽和DRAM访问延迟。在处理数据任务时，根据各物理控制器的负载情况，将放入本地缓存中的数据任务分配给相应的目标物理控制器，以便于目标物理控制器调用相应的线程对本地缓存中的数据任务进行处理。通过轮询和负载均衡机制，提升了数据的处理效率，降低了数据处理的时延。

技术领域

本发明涉及存储系统技术领域，特别是涉及一种基于RDMA的数据处理方法、装置和计算机可读存储介质。

背景技术

在存储系统中，主机端的中央处理器(Central Processing Unit，CPU)主要负责数据的处理，例如，数据的读写操作等。随着数据量的增加，对CPU性能的要求越来越高。但是主机端CPU的处理能力有限，随着数据处理任务的增多，往往导致主机端CPU处于超负荷运行状态，造成数据处理的延迟。

传统方式中，可以将主机端CPU的部分数据处理任务转移至其它终端进行处理。该种处理方式虽然可以降低主机端CPU的负载，但是数据传输过程以及终端处理数据的过程均需要花费时间，仍会出现数据处理的时延。

可见，如何提升数据的处理效率，降低数据处理时延，是本领域技术人员亟待解决的问题。

发明内容

本发明实施例的目的是提供一种基于RDMA的数据处理方法、装置和计算机可读存储介质，可以提升数据的处理效率，降低数据处理时延。

为解决上述技术问题，本发明实施例提供一种基于RDMA的数据处理方法，包括：

将接收到的数据任务存储至相应的事务处理队列中，并为所述数据任务分配对应的线程；

对目标事务处理队列执行轮询操作，依次将所述目标事务处理队列中的数据任务放入本地缓存；其中，目标事务处理队列为所有事务处理队列中的任意一个事务处理队列；

根据各物理控制器的负载情况，将放入本地缓存中的数据任务分配给相应的目标物理控制器，并利用所述目标物理控制器调用相应的线程对本地缓存中的数据任务进行处理。

可选的，所述将接收到的数据任务存储至相应的事务处理队列中，并为所述数据任务分配对应的线程包括：

依据各主机端传输的RDMA注册信息，建立事务处理队列和线程；其中，每个事务处理队列中包含有与各所述主机端相匹配的虚拟控制器和内存空间；

利用各所述虚拟控制器并行接收相应主机端传输的数据任务；

将所述数据任务存储至相应的事务处理队列中，并为所述数据任务分配对应的线程。

可选的，在所述为所述数据任务分配对应的线程之后还包括：

为每个线程设置相对应的轮询组，以便于实现不同线程之间的并行处理。

可选的，所述利用所述目标物理控制器调用相应的线程对本地缓存中的数据任务进行处理包括：

当本地缓存中的数据任务为读任务时，则依据所述读任务中携带的数据地址，读取相应的目标数据；并将所述目标数据存储至预先设定的内存空间中。

可选的，所述利用所述目标物理控制器调用相应的线程对本地缓存中的数据任务进行处理包括：

当本地缓存中的数据任务为写任务时，则将所述写任务对应的目标数据存储至预先设定的内存空间中，并向所述写任务指向的目标设备发送数据写入指令，以便于所述目标设备从所述内存空间中获取所述目标数据。