[发明专利]一种信道接入策略的确定方法及装置

说明书

本发明实施例提供了一种信道接入策略的确定方法及装置，其中，信道接入策略的确定方法包括：按照协调用户收益值和用户后悔值的权重，分别调整用户收益值及用户后悔值，确定基站的累计效应函数值，这样考虑了用户收益值和用户后悔值，使用权重平衡了用户收益值和用户后悔值，完成对信道接入策略进行优化，相较于现有技术，可以得到更优的服务用户的信道接入策略及服务用户的调度形式，提高网络资源的优化性能。

技术领域

本发明涉及通信技术领域，特别是涉及一种信道接入策略的确定方法及装置。

背景技术

随着移动通信的蓬勃发展，未来第五代移动通信技术(5th-Generation，简称5G)在复杂密集传输场景下，需网络资源的高效利用与优化分配。而为了应对无线服务接入需求和有效网络资源之间的矛盾，人们提出了多种资源优化利用的方案，资源优化利用的方案可以包括：对信道接入策略进行优化。

目前采用强化学习可以完成对信道接入策略进行优化。而，利用强化学习算法对信道接入策略进行优化的方案，一味地通过强化学习算法中的“利用exploitation”容易陷入局部次优解，而无法得到全局最优解；或者，过多的通过强化学习中的“探索exploration”降低强化学习算法的性能，从而影响对信道接入策略进行优化的效果。因此，如何在“利用”和“探索”中取得平衡，完成对信道接入策略进行优化，成为亟待解决的问题。

发明内容

本发明实施例的目的在于提供一种信道接入策略的确定方法及装置，用以解决在“利用”和“探索”中取得平衡，完成对信道接入策略进行优化的问题。具体技术方案如下：

第一方面，本发明实施例提供了一种信道接入策略的确定方法，应用于基站，所述方法包括：

在帧的预定时隙内，选择异构频谱池中的信道，所述异构频谱池为异构网络中所有基站共享的包括授权信道和非授权信道的一个异构频谱池；

在确定所述基站能够利用所述信道与服务用户之间进行下行数据传输的情况下，将所述信道划分为两个以上子信道，所述服务用户为所述基站所服务的用户设备；

确定所述服务用户竞争接入的每个子信道的用户收益值及用户后悔值；

在确定每个子信道相邻帧时隙的用户收益值的差值不低于第一门限及所述用户后悔值不低于第二门限的情况下，按照协调所述用户收益值和所述用户后悔值的权重，分别调整所述用户收益值及所述用户后悔值，得到所述基站的累计效应函数值；

基于所述累计效应函数值，确定帧的预定时隙的下一时隙内所述基站的信道接入概率，获取下一时隙，更新帧的预定时隙，继续返回执行在帧的预定时隙内，选择异构频谱池中的信道的步骤，直至所述每个子信道相邻帧时隙的用户收益值的差值低于所述第一门限及所述用户后悔值低于所述第二门限，则确定所述服务用户的调度形式及所述服务用户的信道接入策略。

进一步的，所述按照协调所述用户收益值和所述用户后悔值的权重，分别调整所述用户收益值及所述用户后悔值，得到所述基站的累计效应函数值，包括：

通过如下公式：

分别调整所述用户收益值及所述用户后悔值，得到所述基站的累计效应函数值；

其中，为所述基站的累计效应函数值，A_k为选择的异构频谱池中基站k的信道，k为基站的序号，为所述异构网络中所有基站，K为所述异构网络中基站的总数，n为基站k的服务用户，为基站k的服务用户的集合，为服务用户的集合，x_nk∈{0，1}为服务用户n在基站k下的状态，x_nk＝0为静默状态，x_nk＝1为激活状态，N为所述服务用户的总数，为所述服务用户的选择的基站，δ为协调所述用户收益值和所述用户后悔值的权重，为基站k的服务用户n竞争接入基站k的信道A_k的用户收益值，为基站k的服务用户n竞争接入基站k的信道A_k的用户后悔值。