[发明专利]一种基于后悔度的双连接基站选择方法

说明书

本发明公开了一种基于后悔度的双连接基站选择方法，以后悔度为核心，将后悔度定义为当前时刻用户所连入基站处得到的吞吐量与之前时刻从其他基站得到的吞吐量的差值，即用户如果选择了其他的基站，是否能产生更大的吞吐量，若是，则产生后悔；而当前时刻计算出的后悔度的大小会决定下一时刻用户选择每个基站的概率，且后悔度越大，则此基站下一时刻被选中的率就越大，本发明可以减少用户的切换次数并提升用户得到的吞吐量。

技术领域

本发明涉及基站选择算法领域，特别是涉及一种5G双连接场景中的基站选择算法。

背景技术

在过去几年中，学术界和工业界一起参与并讨论了与下一代无线蜂窝网络相关的场景和要求，即第五代移动通信技术(5G)。这些讨论的协议现在开始成为第三代合作伙伴计划(3GPP:3rd generation partnership project)的标准，预计到2020年将商业化。在此背景下，国际电信联盟将设想的用例分为以下几组：增强的移动宽带、超可靠和低延迟通信、大规模机器类型通信。

为了支持广泛的业务，5G空中接口(NR:new radio)有望在异构场景中与不同技术互通，其中用户设备(UE:user equipment)将具有双连接能力。基于R12标准化的LTE双连接，与传统无线接入技术进行互通，已经作为5G运营要求在在3GPP中提出。

3GPP的R14中已经提出了一种5G双连接场景，如图1所示，即LTE作为宏基站，NR基站作为小基站分布于LTE小区内，用户可以同时连入两种基站，以实现双连接。

现有技术在基站选择问题上，仅是当前移动终端瞬时的接收信号的强度和已设定好阈值的比较下进行的基站选择。没有考虑历史的数据以及所选基站当前连入的用户数对性能的影响，这样可能导致的结果是用户的吞吐量的降低和频繁的切换。

发明内容

发明目的：为了克服现有技术中存在的不足，本发明提供一种5G双连接场景中，用户端的基站选择策略，用于解决现有算法无法应用于5G双连接场景的问题的基于后悔度的双连接基站选择方法。

技术方案：为实现上述目的，本发明采用的技术方案为：

一种基于后悔度的双连接基站选择方法，本发明是终端基于强化学习思想，以后悔度为核心进行基站选择，完成强化学习对5G双连接场景下用户侧的基站选择算法的映射：环境映射为LTE小区覆盖范围内所有终端的位置和连接基站的情况，行动映射为每个时刻使用本发明的用户的基站选择，回报映射为当前时刻使用本发明的用户所连入基站提供的吞吐量。以后悔度为核心，将后悔度定义为当前时刻用户所连入基站处得到的吞吐量与之前时刻从其他基站得到的吞吐量的差值，即用户如果选择了其他的基站，是否能产生更大的吞吐量，若是，则产生后悔；而当前时刻计算出的后悔度的大小会决定下一时刻用户选择每个基站的概率，且后悔度越大，则此基站下一时刻被选中的率就越大。

具体包括以下步骤：

步骤1：初始化用户本身的各种行动的概率；

步骤2：用户和其他用户在随机移动，导致了系统状态发生变化；

步骤3：在当前判决时刻，用户根据上一时刻学习到的概率选择基站；

步骤4：从基站处得到的吞吐量更新了本次基站选择的后悔度；

用户的后悔度为：