[发明专利]一种分布式运算方法、系统、装置及存储介质

说明书

本发明公开了一种分布式运算方法、系统、装置及存储介质，其分布式运算方法包括步骤S1：获取初始数据，对初始数据进行迭代运算处理；步骤S2：获取当前迭代运算的结果并将其存储于非易失存储器中；步骤S3：读取已存储的当前迭代运算结果并将其作为下一次迭代运算的初始数据，返回步骤S1执行下一次迭代运算处理，直至满足迭代终止条件，才输出迭代终止结果。本发明将每次迭代运算所获得的中间结果存入非易失存储器中，在计算机发生宕机的时候，存储在非易失内存中的计算中间结果不会丢失，因而在计算机重启后可以继续使用，不需要重新进行相应的计算和数据操作、传输过程，从而提高了系统的效率和可靠性。

技术领域

本发明涉及分布式文件系统技术领域，尤其涉及一种分布式运算方法、系统、装置及存储介质。

背景技术

大数据是信息产业发展的最重要的技术方向之一。随着海量数据的产生，传统的集中式计算及存储系统难以满足对大数据存储和处理的要求，分布式存储和计算系统得到了广泛的应用。

现有的分布式计算平台会通过迭代方式对输入数据进行多次运算，运算结束后才会将最终运算结果存储在本地存储中。但是，若计算平台在运算过程中出现计算机宕机或断电等故障情况时，计算平台的运算数据会发生丢失，导致重启系统时无法还原最新的运算数据，需要计算平台重新执行运算任务，重复系统故障前的每一步计算过程和数据操作、传输过程，导致延长程序执行时间，造成资源的浪费。

发明内容

为了克服现有技术的不足，本发明的目的之一在于提供一种分布式运算方法，可确保运算中间结果不会丢失，提高系统可靠性和系统重启效率。

本发明的目的之二在于提供一种执行上述运算方法的运算系统。

本发明的目的之三在于提供一种执行上述运算方法的电子设备。

本发明的目的之四在于提供一种执行上述运算方法的存储介质。

本发明的目的之一采用如下技术方案实现：

一种分布式运算方法，包括：

步骤S1：获取初始数据，对初始数据进行迭代运算处理；

步骤S2：获取当前迭代运算的结果并将其存储于非易失存储器中；

步骤S3：读取已存储的当前迭代运算结果并将其作为下一次迭代运算的初始数据，返回步骤S1执行下一次迭代运算处理，直至满足迭代终止条件，才输出迭代终止结果。

进一步地，所述步骤S1中获取初始数据后，还包括：

判断所述初始数据是否从所述非易失存储器中读取获得，若不是，则将获取的所述初始数据写入所述非易失存储器中。

进一步地，所述非易失存储器采用读写时间小于50ns，且耐擦写次数大于10¹⁰的存储器。

进一步地，所述非易失存储器包括但不限于自旋转移扭矩磁性随机存储器、自旋轨道扭矩磁性随机存储器、磁性赛道存储器或铁电随机存储器。

进一步地，所述获取当前迭代运算的结果并将其写入非易失存储器中的方法为：

获取易失内存地址，将当前迭代运算的结果预先写入易失内存地址所对应的易失存储器中；

再获取非易失内存地址，将易失存储器中存储的当前迭代运算的结果转存入非易失内存地址所对应的非易失存储器中。

进一步地，所述步骤S3中满足迭代终止条件，包括：

判断是否完成所有迭代运算，若已完成所有迭代运算，则迭代运算终止；或，

判断迭代运算是否已收敛，若已收敛，则迭代运算终止；或，