[发明专利]用于处理任务的方法、电子设备和计算机程序产品

说明书

本公开的实施例提供了一种用于处理任务的方法、电子设备和计算机程序产品。该方法包括：获取由第一设备的第一组处理资源处理任务中的第一组子任务而产生的第一组处理结果；对第一组处理结果执行第一归约操作，以得到第一归约结果；获取来自第二设备的第二归约结果，第二归约结果是对由第二设备的第二组处理资源处理任务中的第二组子任务而产生的第二组处理结果来执行第二归约操作而得到的；以及对第一归约结果和第二归约结果执行第三归约操作，以得到任务的处理结果。以此方式，本公开的实施例可以在并行处理任务时减少多个设备间的数据交换量。

技术领域

本公开的实施例涉及数据处理领域，更具体地，涉及用于处理任务的方法、电子设备和计算机程序产品。

背景技术

随着计算机技术的发展，处理资源的种类越来越丰富，其计算能力也越来越强。由于处理资源特有性质，处理资源特别适合于处理多种类型的计算任务。这些计算任务例如可以是深度学习、机器学习、数据挖掘、高性能计算等任务。在一些情况下，这些计算任务的运算量有时会非常巨大，例如，电子设备在训练一个深度学习模型时可能需要扫描数百万张图像，这需要多个处理资源来共同完成一个任务。然而，在共同完成一个任务的过程中，多个处理资源之间需要频繁的交换数据来保证数据同步，进而导致大量的网络资源被占用，使得处理任务的效率降低。

发明内容

本公开的实施例提供了一种用于处理任务的方法、电子设备和计算机程序产品。

在本公开的第一方面，提供了一种用于处理任务的方法。该方法包括：获取由第一设备的第一组处理资源处理任务中的第一组子任务而产生的第一组处理结果；对第一组处理结果执行第一归约操作，以得到第一归约结果；获取来自第二设备的第二归约结果，第二归约结果是对由第二设备的第二组处理资源处理任务中的第二组子任务而产生的第二组处理结果来执行第二归约操作而得到的；以及对第一归约结果和第二归约结果执行第三归约操作，以得到任务的处理结果。

在本公开的第二方面提供了电子设备。该电子设备包括：处理器；以及存储器，存储有计算机程序指令，处理器运行存储器中的计算机程序指令控制设备执行动作，动作包括：获取由第一设备的第一组处理资源处理任务中的第一组子任务而产生的第一组处理结果；对第一组处理结果执行第一归约操作，以得到第一归约结果；获取来自第二设备的第二归约结果，第二归约结果是对由第二设备的第二组处理资源处理任务中的第二组子任务而产生的第二组处理结果来执行第二归约操作而得到的；以及对第一归约结果和第二归约结果执行第三归约操作，以得到任务的处理结果。

在本公开的第三方面，提供了一种计算机程序产品。该计算机程序产品被有形地存储在非瞬态计算机存储介质中并且包括机器可执行指令。该机器可执行指令在由设备执行时使该设备执行动作，动作包括：获取由第一设备的第一组处理资源处理任务中的第一组子任务而产生的第一组处理结果；对第一组处理结果执行第一归约操作，以得到第一归约结果；获取来自第二设备的第二归约结果，第二归约结果是对由第二设备的第二组处理资源处理任务中的第二组子任务而产生的第二组处理结果来执行第二归约操作而得到的；以及对第一归约结果和第二归约结果执行第三归约操作，以得到任务的处理结果。

应当理解，发明内容部分并非旨在标识本公开的实施例的关键或重要特征，亦非旨在用于限制本公开的范围。本公开的其它特征将通过以下的描述变得容易理解。

附图说明

通过参照附图的以下详细描述，本公开实施例的上述和其他目的、特征和优点将变得更容易理解。在附图中，将以示例以及非限制性的方式对本公开的多个实施例进行说明，其中：

图1示出了根据本公开的实施例的用于处理任务的示例环境100的示意图；

图2示出了根据本公开的实施例的用于处理任务的方法200的流程图；

图3示出了根据本公开的实施例的用于处理任务的示意性框图；以及