[发明专利]一种基于深度增强学习的无线网络资源分配方法

摘要

本发明提供一种基于深度增强学习的无线网络资源分配方法，能够以较低复杂度最大限度地提高时变信道环境中的能量效率。所述方法包括：建立深度增强学习模型；将基站与用户终端之间的时变信道环境建模为有限状态的时变马尔科夫信道，确定归一化信道系数，并输入卷积神经网络qeval，选择输出回报值最大的动作作为决策动作，为用户分配子载波；根据子载波分配结果，基于信道系数的反比为每个子载波上复用的用户分配下行功率，基于分配的下行功率确定回报函数，并将回报函数反馈回深度增强学习模型；根据确定的回报函数，训练深度增强学习模型中的卷积神经网络qeval、qtarget，确定时变信道环境下功率局部最优分配。本发明涉及无线通信以及人工智能决策领域。

主权项

1.一种基于深度增强学习的无线网络资源分配方法，其特征在于，包括：S101，建立由两张相同参数的卷积神经网络qeval、qtarget构成深度增强学习模型；S102，将基站与用户终端之间的时变信道环境建模为有限状态的时变马尔科夫信道，确定基站与用户之间的归一化信道系数，并输入卷积神经网络qeval，选择输出回报值最大的动作作为决策动作，为用户分配子载波；S103，根据子载波分配结果，基于信道系数的反比为每个子载波上复用的用户分配下行功率，基于分配的下行功率确定系统能量效率，基于所述系统能量效率确定回报函数，并将回报函数反馈回深度增强学习模型；S104，根据确定的回报函数，训练深度增强学习模型中的卷积神经网络qeval、qtarget，若连续多次所得的系统能量效率值与预设阈值之间的差值在预设的范围内或高于预设阈值，则当前分配的下行功率为时变信道环境下功率局部最优分配。