[发明专利]一种数据处理方法、装置、设备及存储介质

说明书

本申请公开了一种数据处理方法，该方法包括：获取数据平面开发套件DPDK命令参数；基于所述DPDK命令参数，确定数据处理器和业务处理器；其中，所述数据处理器和所述业务处理器不同；基于所述数据处理器和所述业务处理器，确定目标存储区域；其中，所述目标存储区域用于存储通过所述数据处理器接收到的数据包；通过所述业务处理器从所述目标存储区域获取目标数据包，并基于所述目标数据包进行业务处理，从而实现了业务处理线程无需多次拷贝数据包的实现方案，并提高了业务处理线程对数据包的处理效率。本申请还公开了一种数据处理装置、设备及存储介质。

技术领域

本申请涉及计算机通信技术领域，尤其涉及一种数据处理方法、装置、设备及存储介质。

背景技术

当前，随着高速网络的迅速发展，数据平面开发套件(Data Plane DevelopmentKit，DPDK)在网络数据转发领域应用越来越广。DPDK在数据平面应用中为快速处理数据包提供了简单完善的架构，并DPDK使用轮询(polling)机制处理数据包，在收到数据包时DPDK重载的网卡驱动不会通过中断通知CPU，而是直接将数据包存入内存，应用层软件通过DPDK提供的接口直接处理，大大节省CPU中断时间和内存拷贝时间。基于上述优点，越来越多的采集分析业务也借助DPDK实现底层数据的高效收发处理，DPDK框架提供了方法使得用户业务方便的从网卡队列读取数据进行处理，目前使用DPDK接收到数据包后进行处理的方案主要有：在DPDK接收数据线程中串行处理数据报文，但在数据线程中对DPDK接收到的数据包进行数据处理时，会出现个别耗性能业务，如复杂的报文解析或等待回填等，导致整个线程的拥塞，进而出现网卡队列缓冲区溢出，报文丢失的问题，为了解决上述问题，目前常用的技术方案史将接收到的数据包发送给业务处理线程，由业务处理线程对数据包进行业务处理。

但是，目前通过业务处理线程进行业务处理时，存在数据包多次拷贝的问题，导致业务处理线程无法使用DPDK的大页及实现高效内存操作，降低了业务处理线程对数据包的处理效率。

申请内容

为解决上述技术问题，本申请期望提供一种数据处理方法、装置、设备及存储介质，解决了通过业务处理线程进行业务处理时，存在数据包的多次拷贝的问题，实现了业务处理线程无需多次拷贝数据包的实现方案，并提高了业务处理线程对数据包的处理效率。

本申请的技术方案是这样实现的：

第一方面，一种数据处理方法，所述方法应用于数据处理设备，所述数据处理设备用于运行数据平面开发套件DPDK，所述方法包括：

获取DPDK命令参数；

基于所述DPDK命令参数，确定数据处理器和业务处理器；其中，所述数据处理器和所述业务处理器不同；

基于所述数据处理器和所述业务处理器，确定目标存储区域；其中，所述目标存储区域用于存储通过所述数据处理器接收到的数据包；

通过所述业务处理器从所述目标存储区域获取目标数据包，并基于所述目标数据包进行业务处理。

可选的，所述基于所述DPDK命令参数，确定数据处理器和业务处理器，包括：

从所述DPDK命令参数中获取数据属性信息和业务属性信息；

确定属性信息为所述数据属性信息的处理器为所述数据处理器；

确定属性信息为所述业务属性信息的处理器为所述业务处理器。

可选的，所述基于所述数据处理器和业务处理器，确定目标存储区域，包括：

统计所述数据处理器的数量，得到第一数量；

统计所述业务处理器的数量，得到第二数量；

基于所述第一数量和所述第二数量，确定所述目标存储区域。