[发明专利]数据处理装置及其处理数据的方法、介质、存储控制器

说明书

本发明提供了一种数据处理装置及其处理数据的方法、介质、存储控制器，其中，数据处理装置包括：通用接口函数、多线程处理模块、消息队列和中间件客户端；多线程处理模块，用于构建至少两个任务线程，控制至少两个任务线程中的至少两个目标任务线程分别调用通用接口函数以接收至少两个联网终端所分别提供的业务数据；消息队列，用于缓存至少两个目标任务线程所分别接收的业务数据；中间件客户端，用于读取消息队列中存储的每一个业务数据，将每一个业务数据的数据格式转换成目标数据格式，并将转换后的各个业务数据存储至指定区域。通过本发明的技术方案，可实现同时处理大量联网终端同时提供的业务数据。

技术领域

本发明涉及计算机技术领域，特别涉及一种数据处理装置及其处理数据的方法、介质、存储控制器。

背景技术

随着物联网技术的快速发展，MQTT(Message Queuing Telemetry Transport，消息队列遥测传输)作为一个即时通讯协议，已成为物联网的一个重要组成部分，通过该协议可将业务平台和大量的联网终端(比如，冰箱、洗衣机以及空调器等)连接起来，使得业务平台可以接收并存储各个联网终端提供的业务数据。

目前，各个联网终端提供的业务数据的格式可能各不相同，业务平台主要通过部署虚拟机的形式接收并转换不同联网终端分别提供的不同格式的业务数据，进而将转换后的业务数据存储至业务平台的指定存储区域。

虚拟机垃圾回收机制需要占用较大的内存空间，无法同时处理大量联网终端同时提供的业务数据。

发明内容

本发明实施例提供了一种数据处理装置及其处理数据的方法、介质、存储控制器，可同时处理大量联网终端同时提供的业务数据。

第一方面，本发明提供了一种数据处理装置，包括：

通用接口函数、多线程处理模块、消息队列和中间件客户端；其中，

所述多线程处理模块，用于构建至少两个任务线程，控制所述至少两个任务线程中的至少两个目标任务线程分别调用所述通用接口函数以接收至少两个联网终端所分别提供的业务数据；

所述消息队列，用于缓存所述至少两个目标任务线程所分别接收的所述业务数据；

所述中间件客户端，用于读取所述消息队列中存储的每一个所述业务数据，将每一个所述业务数据的数据格式转换成目标数据格式，并将转换后的各个业务数据存储至指定区域。

优选地，

所述多线程处理模块，包括：任务创建单元和线程构建单元；其中，

所述任务创建单元，用于在接收到至少两个联网终端分别发送的数据处理请求时，创建与各个所述联网终端所分别对应的任务，并将创建的各个任务加入到任务队列；

所述线程构建单元，用于构建所述任务队列中每一个所述任务所分别对应的任务线程。

优选地，

所述多线程处理模块，进一步包括：线程管理单元；其中，

所述线程管理单元，用于检测构建的任务线程的线程总量是否大于预设数量，如果是，则从构建的各个任务线程中选择预设数量个未被选择过的目标任务线程，控制各个目标任务线程分别调用所述通用接口函数以接收至少两个联网终端所分别提供的业务数据。

第二方面，本发明实施例提供了一种利用第一方面中任一所述的数据处理装置处理数据的方法，包括：

利用所述多线程处理模块构建至少两个任务线程，控制所述至少两个任务线程中的至少两个目标任务线程分别调用所述通用接口函数以接收至少两个联网终端所分别提供的业务数据；

利用所述消息队列缓存所述至少两个目标任务线程所分别接收的所述业务数据；