[发明专利]数据处理方法、装置、存储介质及服务器

说明书

本申请实施例提供一种数据处理方法、装置、存储介质及服务器，所述数据处理方法包括：当接收到传入的数据时，获取所述数据的属性信息；若所述数据为流数据，则将所述数据分发至流数据处理节点；若所述数据为非流数据，则将所述数据分发至非流数据处理节点；将接收到的流数据按照事件切分为多个事件数据块，并分发至流数据机器学习平台进行处理；将接收到的非流数据按照时间间隔切分为多个批处理数据块，并分发至非流数据机器学习平台进行处理。所述数据处理方法可以根据数据的不同属性将所述数据分发到不同的处理节点进行不同的处理，减少对数据进行处理的拥堵和延时，从而可以提高服务器的数据处理效率。

技术领域

本申请涉及电子技术领域，特别涉及一种数据处理方法、装置、存储介质及服务器。

背景技术

随着电子技术的发展，诸如智能手机等电子设备能够为用户提供的服务越来越多。例如，电子设备可以为用户提供社交服务、导航服务、旅游推荐服务等。电子设备提供的服务越多，就意味着需要处理的数据量越大，甚至很多服务需要依赖于服务器对大量的数据进行统一处理。

发明内容

本申请实施例提供一种数据处理方法、装置、存储介质及服务器，可以提高服务器的数据处理效率。

本申请实施例提供一种数据处理方法，应用于服务器，所述服务器包括数据分发单元以及与所述数据分发单元通信连接的流数据处理节点和非流数据处理节点，所述数据处理方法包括：

当所述数据分发单元接收到传入的数据时，获取所述数据的属性信息，所述属性信息包括流数据以及非流数据；

若所述数据为流数据，则将所述数据分发至流数据处理节点；

若所述数据为非流数据，则将所述数据分发至非流数据处理节点；

所述流数据处理节点将接收到的流数据按照事件切分为多个事件数据块，并将所述多个事件数据块分发至流数据机器学习平台进行处理；

所述非流数据处理节点将接收到的非流数据按照时间间隔切分为多个批处理数据块，并将所述多个批处理数据块分发至非流数据机器学习平台进行处理。

本申请实施例还提供一种数据处理装置，应用于服务器，所述服务器包括数据分发单元以及与所述数据分发单元通信连接的流数据处理节点和非流数据处理节点，所述数据处理装置包括：

属性获取模块，用于当接收到传入的数据时，通过所述数据分发单元获取所述数据的属性信息，所述属性信息包括流数据以及非流数据；

第一数据分发模块，用于若所述数据为流数据，则通过所述数据分发单元将所述数据分发至流数据处理节点；

第二数据分发模块，用于若所述数据为非流数据，则通过所述数据分发单元将所述数据分发至非流数据处理节点；

第一数据处理模块，用于通过所述流数据处理节点将接收到的流数据按照事件切分为多个事件数据块，并将所述多个事件数据块分发至流数据机器学习平台进行处理；

第二数据处理模块，用于通过所述非流数据处理节点将接收到的非流数据按照时间间隔切分为多个批处理数据块，并将所述多个批处理数据块分发至非流数据机器学习平台进行处理。

本申请实施例还提供一种存储介质，所述存储介质中存储有计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行上述数据处理方法。

本申请实施例还提供一种服务器，包括处理器和存储器，所述存储器中存储有计算机程序，所述处理器通过调用所述存储器中存储的所述计算机程序，用于执行上述数据处理方法。

本申请实施例还提供一种服务器，包括：

数据分发单元，用于：