[发明专利]一种蜂窝物联网上行资源分配方法及电子设备

说明书

本说明书一个或多个实施例提供一种蜂窝物联网上行资源分配方法及电子设备，所述方法包括：将蜂窝物联网的每个边缘节点和每个直传节点均作为智能体，智能体根据当前系统状态采用探索‑利用策略选取动作空间A_i中的动作a_i并执行；根据执行的动作a_i通过奖励函数计算每个智能体的奖励值；以及根据智能体的Q函数确定智能体当前系统状态下的Q函数，且智能体从当前系统状态进入下一系统状态；基于智能体的估计策略、平均估计策略确定智能体执行动作a_i时的平均估计策略和估计策略；根据达到预设迭代次数的智能体最优的估计策略，对蜂窝物联网的上行资源进行资源分配。本公开提供的方法可实现对蜂窝物联网上行资源进行有效的资源的分配。

技术领域

本说明书一个或多个实施例涉及无线通信技术领域，尤其涉及一种蜂窝物联网上行资源分配方法及电子设备。

背景技术

作为5G的三大应用场景之一，海量机器类型通信(mMTC)旨在为大规模的物联网(IoT)设备提供连接。mMTC每平方公里支持100万个以上具有各种QoS要求的设备的连接，在为万物互联带来机遇的同时，也对频谱利用率、传输延迟和数据吞吐量等方面提出了新的挑战。非正交多址技术(Non-orthogonal multiple access，NOMA)被视为是一项可以有效应对这些挑战的关键技术。与传统正交多址技术相比，NOMA通过利用新的功率和编码域对设备之间的有限资源进行非正交资源分配，可以提高频谱效率，减少访问延迟和信令开销，在支持海量连接时更具有优势。NOMA的基本思想是在发送端采用非正交传输，主动引入干扰信息，在接收端通过连续干扰消除(SIC)技术进行解调。SIC可以很好地提高频谱效率，有效增强上行链路和下行链路的网络容量。鉴于NOMA的独特优势，目前3GPP已将NOMA纳入5GmMTC标准的技术部分，NOMA中的资源管理也成为了无线通信领域的热点研究问题。

目前，由于大规模蜂窝物联网应用场景中物联网设备性能普遍较差，无法完成NOMA传输中的连续干扰消除(SIC)技术，使用于转发的中继节点和基站不能进行有效通信；同时NOMA频谱资源共享会出现复杂干扰情况，导致无法对蜂窝物联网上行资源进行有效的资源分配。

发明内容

有鉴于此，本说明书一个或多个实施例的目的在于提出一种蜂窝物联网上行资源分配方法及电子设备，以解决无法对蜂窝物联网上行资源进行有效的资源分配的问题。

基于上述目的，本说明书一个或多个实施例提供了一种蜂窝物联网上行资源分配方法，包括：

将蜂窝物联网的每个边缘节点和每个直传节点均作为智能体，对所述智能体执行如下操作，直至达到预设迭代次数：

所述智能体根据所述智能体当前系统状态采用探索-利用策略选取动作空间A_i中的动作a_i并执行所述动作a_i；

根据执行的所述动作a_i通过奖励函数计算每个所述智能体的奖励值；以及

根据所述智能体的Q函数确定所述智能体当前系统状态下的Q函数，且所述智能体从当前系统状态进入下一系统状态；

基于所述智能体的估计策略、平均估计策略确定所述智能体执行所述动作a_i时的平均估计策略和估计策略；以及

响应于确定所述智能体执行所述动作a_i时的估计策略值大于平均估计策略值，利用学习速率δ_w调整当前的估计策略，否则利用学习速率δ_l调整当前的估计策略，其中δ_lδ_w；

所述智能体执行的以上操作达到所述预设迭代次数，得到最优的所述估计策略；

根据最优的所述估计策略，对所述蜂窝物联网的上行资源进行资源分配。