[发明专利]分布式计算系统和方法

摘要

本申请公开了一种分布式计算系统和方法，其中该系统包括：多个集群，用于进行分布式计算；全局元数据服务器，用于保存并管理多集群数据副本分布视图和多集群拓扑结构视图；跨集群数据复制服务器，用于根据复制指令将指定的数据复制到复制指令指定的集群；以及数据访问分配服务器，用于根据集群的数据使用请求、多集群数据副本分布视图和多集群拓扑结构视图分配目标数据的位置信息，并根据目标数据的位置信息生成复制指令，以使跨集群数据复制服务器将目标数据对应的目标数据副本复制到数据使用请求指定的集群。该系统可以使得在网络条件受限的多集群环境中，业务数据副本多地动态分布时，确保计算任务在有限等待时间范围内获取到业务数据。

主权项

1.一种分布式计算系统，其特征在于，包括：多个集群，用于进行分布式计算；全局元数据服务器，用于保存并管理多集群数据副本分布视图和多集群拓扑结构视图；跨集群数据复制服务器，用于根据复制指令将指定的数据复制到所述复制指令指定的集群；以及数据访问分配服务器，用于根据所述集群的数据使用请求、所述多集群数据副本分布视图和多集群拓扑结构视图分配目标数据的位置信息，并根据所述目标数据的位置信息生成所述复制指令，以使所述跨集群数据复制服务器将所述目标数据对应的目标数据副本复制到所述数据使用请求指定的集群；其中，所述数据访问分配服务器根据所述集群的数据使用请求、所述多集群数据副本分布视图和多集群拓扑结构视图分配目标数据的位置信息，包括：所述数据访问分配服务器接收所述集群的数据使用请求，并根据所述数据使用请求访问所述全局元数据服务器以获取请求数据列表的全局分布信息、多集群拓扑结构视图及相应的带宽描述信息，访问所述跨集群数据复制服务器以获取数据副本产生的状态和进度，并通过综合考虑所述请求数据列表的全局分布信息、多集群拓扑结构视图及相应的带宽描述信息、所述数据副本产生的状态和进度，为每个请求分配目标数据的位置信息。