[发明专利]任务卸载方法、系统、装置和存储介质

说明书

本发明公开了一种任务卸载方法、系统、装置和存储介质，任务卸载方法包括执行决策过程，确定网络状态值、即时奖励值和长期效用值，以及以最优决策过程所确定的第一终端、第二终端和协作卸载终端执行任务卸载等步骤。通过匹配第一终端和第二终端，并且令其中一个终端作为另一个终端的协作卸载终端，可以实现并行传输结构以进行协作卸载，例如将一个终端的任务数据并行地卸载给协作卸载终端和接入点，从而达到降低任务卸载延迟和能量消耗；与现有技术相比，实施例中的任务卸载方法更适用于多终端的环境，并且可以实现更大范围的延迟优化，例如在更长的一段时间里总的时间消耗和资源消耗的优化。本发明广泛应用于移动通信技术领域。

技术领域

本发明涉及移动通信技术领域，尤其是一种任务卸载方法、系统、装置和存储介质。

背景技术

在NOMA-MEC等5G通信技术中，为实现通信过程，移动终端需要进行任务卸载，例如移动终端将任务数据卸载至接入点(AP)等。任务卸载过程所面临的问题中包括延迟问题。基于边缘计算的任务卸载技术是一种能减少任务卸载的延迟的现有技术，边缘计算的原理是把原先由核心节点进行的事务处理，分到各边缘节点进行处理，并靠近终端用户来布局，从而使系统更高效更易于管理，正是由于边缘节点更接近用户终端装置，可以加快资料的处理和传送速度，减少延迟。但是基于边缘计算的任务卸载技术在未事先知道其他终端的行为的情况下，所获得的单点的最优匹配，但是不能保证在长的一段时间里总的时间消耗和资源消耗得到了优化。

发明内容

针对上述至少一个技术问题，本发明的目的在于提供一种任务卸载方法、系统、装置和存储介质。

一方面，本发明实施例包括一种任务卸载方法，包括：

执行决策过程；所述决策过程用于确定与第一终端匹配的第二终端，根据判定条件，将所述第二终端设定为所述第一终端的协作卸载终端，或者将所述第一终端设定为所述第二终端的协作卸载终端；

根据所述协作卸载终端的设定结果，确定网络状态值；

根据所述网络状态值以及所述决策过程中所执行的动作，确定即时奖励值；

根据所述即时奖励值，确定长期效用值；

确定最优决策过程；所述最优决策过程为使所述长期效用值最大化的决策过程；

以所述最优决策过程所确定的第一终端、第二终端和协作卸载终端，执行任务卸载。

进一步地，所述任务卸载方法还包括以下步骤：

训练神经网络；所述神经网络的输入包括所述网络状态值以及所述决策过程中所执行的动作；

当所述神经网络的输出与最大化的所述长期效用值之间的偏差小于预设阈值，结束对所述神经网络的训练。

进一步地，所述训练神经网络中，以均方误差作为损失函数。

进一步地，所述根据判定条件，将所述第二终端设定为所述第一终端的协作卸载终端，或者将所述第一终端设定为所述第二终端的协作卸载终端，包括：

确定第一卸载延迟和第二卸载延迟；所述第一卸载延迟为所述第一终端在OMA模式下的卸载延迟，所述第二卸载延迟为所述第二终端在OMA模式下的卸载延迟；

当所述第二卸载延迟小于所述第一卸载延迟，将所述第二终端设定为所述第一终端的协作卸载终端；

当所述第一卸载延迟小于所述第二卸载延迟，将所述第一终端设定为所述第二终端的协作卸载终端。

进一步地，所述即时奖励值为所述第一卸载延迟和所述第二卸载延迟之和的相反数。

进一步地，当所述第二终端为所述第一终端的协作卸载终端，所述以所述最优决策过程所确定的第一终端、第二终端和协作卸载终端，执行任务卸载，包括：