[发明专利]一种数据分配方法、装置、电子设备及存储介质

说明书

本发明实施例公开了一种数据分配方法、装置、电子设备及存储介质。该方法包括：接收待分配的请求数据，获取请求数据的数据来源信息；基于数据来源信息和一致性哈希算法，确定请求数据对应的请求哈希键；基于请求哈希键和预先建立的各集群节点与各哈希键之间的哈希映射关系，在各集群节点中确定出请求哈希键对应的目标集群节点，将请求数据分配至目标集群节点。本发明实施例的技术方案，可以通过数据来源信息和一致性哈希算法分配请求数据，解决数据流量不可控的问题，能够更好的利用集群资源，有利于提高数据处理效率。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种数据分配方法、装置、电子设备及存储介质。

背景技术

随着数据量的急剧膨胀，为提高数据处理的效率和能力，采用多集群节点对数据处理的方式得到广泛应用。

现有技术中，在为请求数据分配集群节点时，为了方便追溯，通常将数据进行分类，同一类型的数据分配至同一集群节点，从而用户访问某类型的数据时，仅访问一个集群节点即可。例如，按照请求用户终端使用的运行商不同，对请求数据进行分类。但是，采用现有技术易出现各集群节点分配的数据流量均不可控，易出现分配失衡的情况，产生资源浪费，降低了数据处理效率。

发明内容

本发明实施例提供了一种数据分配方法、装置、电子设备及存储介质，以实现更好的利用集群资源，有利于提高数据处理效率。

第一方面，本发明实施例提供了一种数据分配方法，包括：

接收待分配的请求数据，获取所述请求数据的数据来源信息；

基于所述数据来源信息和一致性哈希算法，确定所述请求数据对应的请求哈希键；

基于所述请求哈希键和预先建立的各集群节点与各哈希键之间的哈希映射关系，在各集群节点中确定出所述请求哈希键对应的目标集群节点，将所述请求数据分配至所述目标集群节点。

第二方面，本发明实施例还提供了数据分配装置，该装置包括：

获取数据来源信息模块，用于接收待分配的请求数据，获取所述请求数据的数据来源信息；

确定请求哈希键模块，用于基于所述数据来源信息和一致性哈希算法，确定所述请求数据对应的请求哈希键；

分配请求数据模块，用于基于所述请求哈希键和预先建立的各集群节点与各哈希键之间的哈希映射关系，在各集群节点中确定出所述请求哈希键对应的目标集群节点，将所述请求数据分配至所述目标集群节点。

第三方面，本发明实施例还提供了一种电子设备，该电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明任意实施例所提供的数据分配方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现本发明任意实施例所提供的数据分配方法。

本发明实施例所提供的一种数据分配方法，接收待分配的请求数据，获取请求数据的数据来源信息；基于数据来源信息和一致性哈希算法，确定请求数据对应的请求哈希键；基于请求哈希键和预先建立的各集群节点与各哈希键之间的哈希映射关系，在各集群节点中确定出请求哈希键对应的目标集群节点，将请求数据分配至目标集群节点。本发明实施例通过数据来源信息和一致性哈希算法分配请求数据，解决了数据流量不可控的问题，能够更好的利用集群资源，有利于提高数据处理效率。

此外，本发明所提供的一种数据分配装置、电子设备及存储介质与上述方法对应，具有同样的有益效果。

附图说明