[发明专利]分布式异构计算的数据访问方法

权利要求书

1.一种分布式异构计算系统中管理全局数据集的方法，其特征在于，所述方法包括以下步骤:

(1)分布式异构计算系统中的数据消费计算节点的计算组件向联网数据管理系统发出至少一条数据请求，请求获得数据对象；

(2)所述联网数据管理系统根据所述数据请求，查询联网数据集，所述联网数据集由联网数据管理系统管理；

(3)所述联网数据管理系统根据查询结果，向所述数据消费计算节点的计算组件返回：(a)请求的所述数据对象，或(b)能提供所述数据对象的分布式异构计算系统中的数据生产节点的接入方式；

(4)所述数据消费计算节点的计算组件获得所述数据对象；

其中，所述数据生产节点向其他计算节点提供数据帧或者数据流，所述数据消费计算节点从其他计算节点获取数据帧或数据流；

其中，所述联网数据集的数据对象分为三类：(a)数据值，(b)数据帧，以及(c)数据流；其中，数据值存储在联网数据管理系统中，所述计算组件向联网数据管理系统提出请求后，联网数据管理系统查找后立刻向所述计算组件返回；数据帧和数据流存储在数据生产节点中，数据消费计算节点中的计算组件向联网数据管理系统提出请求后，联网数据管理系统向数据消费计算节点返回存储有所述数据帧或数据流的数据生产节点的接入方式，数据消费计算节点依据所述数据生产节点的接入方式，向数据生产节点请求所述数据帧或数据流。

2.根据权利要求1所述的方法，其特征在于，所述分布式异构计算系统包括1个或2个以上的数据消费计算节点，以及1个或2个以上的数据生产节点；所述数据消费计算节点和所述数据生产节点运行联网数据管理系统。

3.根据权利要求2所述的方法，其特征在于，所述联网数据管理系统对数据生产节点进行维护：当某个数据生产节点失效时，所述联网数据管理系统自动删除该数据生产节点的接入方式，当某个数据生产节点上线时，所述联网数据管理系统自动增加该数据生产节点的接入方式。

4.根据权利要求2或3所述的方法，其特征在于，所述分布式异构计算系统包括1台或2台以上的服务器，所述服务器使得所述数据消费计算节点和所述数据生产节点运行的联网数据管理系统所管理的联网数据集保持全局一致。

5.根据权利要求1-3中任一项所述的方法，其特征在于，同一数据对象被2个以上的计算组件执行写操作时，所述联网数据管理系统提供排他锁，保证同一时间只有一个计算组件能对同一数据对象执行写操作；同一数据对象被2个以上的计算组件执行读操作时，所述联网数据管理系统提供共享锁，保证所有计算组件都能完成读操作。

6.一种分布式异构计算系统中管理本地数据集的方法，其特征在于，包括以下步骤：

(1)分布式异构计算系统中的数据消费计算节点的计算组件向本地数据管理系统发出至少一条数据请求，请求获得数据对象；

(2)所述本地数据管理系统根据所述数据请求，查询本地数据集，所述本地数据集由本地数据管理系统管理；

(3)如果在本地数据集中查询到所述数据对象，则所述本地数据管理系统向所述计算组件返回所述数据对象；如果在本地数据集中未查询到所述数据对象，则所述计算组件向分布式异构计算系统中的联网数据管理系统发出请求；

(4)本地数据管理系统，维护本地数据集和联网数据集的映射关系；

其中，步骤(3)中，所述计算组件以同步方式、异步方式或惰性赋值方式向分布式异构计算系统中的联网数据管理系统发出请求，具体如下：

同步方式：计算组件向联网数据管理系统发出数据请求，直至远程数据对象返回，并经过数据转换后存入本地缓存，并返回请求数据对象；

异步方式：计算组件向联网数据管理系统发出数据请求，并设置回调函数，计算组件继续执行其他操作，当远程数据对象返回后，触发回调函数，完成数据转换后存入本地缓存，并注册数据对象；

惰性赋值方式：计算组件向联网数据管理系统发出数据请求，并注册数据对象，只有当远程数据对象被使用的时候，该远程数据对象才被取回本地。