一种波束分配方法组成比例

本申请公开了一种波束分配方法，包括以下步骤：为用户设备获取备用波束集；在备用波束集中选取最优波束；毫米波基站根据所述最优波束向用户设备发射波束。本申请的波束分配方法能够以用户效用和为最大化目标，提高了用户间的传输速率的公平性。将LOS径波束和所有NLOS径波束组合形成UE的备选波束集，解决了波束分配过程中带来的波束间干扰问题。

A beam assignment method

The present application discloses a beam allocation method comprising the following steps: obtaining a reserve beam set for the user equipment; selecting an optimal beam in the reserve beam set; and transmitting a beam to the user equipment by a millimeter wave base station according to the optimal beam. The proposed beam allocation method can maximize the user utility and improve the fairness of the transmission rate between users. The LOS beam and all NLOS beam are combined to form the UE alternative beam set, which solves the problem of inter-beam interference during beam allocation.

【技术实现步骤摘要】
一种波束分配方法
本专利技术涉及通信领域，尤其涉及一种波束分配方法。
技术介绍
近年来，随着智能手机和平板电脑的广泛使用，各种应用的业务量猛增，移动数据应用加速增长，这使得移动通信系统蜂窝网络面临重大挑战。然而现阶段广泛应用的6GHz以下的微波频段无法提供足够的频谱资源，系统容量限制将无法进一步满足高速率业务的需求。因此30-300GHz的毫米波段受到了广泛重视。尽管其蕴涵丰富可用频谱资源，能够缓解频谱资源稀缺的压力，毫米波段也有一些固有的缺陷。毫米波的路径损失很高、对障碍物的穿透能力很差，使得小区覆盖范围下降。但是这可以通过应用多天线技术克服，利用波束赋形技术获得的高增益可以增大小区覆盖范围、扩充系统容量、减小干扰。同时，毫米波段的短波长也更有利于大规模天线的部署。综上，毫米波大规模天线(MassiveMIMO)系统是新一代移动通信关键技术之一。由于毫米波系统的路径损耗很大，需要收发双方都使用波束赋形技术，利用高方向性波束对准带来的高增益弥补无线链路传输的损耗。现有波束分配主要思想是选择信道增益最大的直射径(LOS)为发送波束。然而，考虑到数据传输流程中的多用户设备(UE)传输环境，一旦UE的离开角或地理位置相近，利用LOS径波束方案确定的数据发送波束间极易发生干扰。在恶劣情况下，毫米波基站对多个UE的数据发送波束甚至发生冲突(即多UE选用相同的波束)，导致系统容量大幅度下降。因此，对于数据传输流程而言，波束分配算法应当合理地调配波束资源，降低UE间波束干扰。现有波束分配方法存在一定局限性：首先，方法的设计思路为局部优化而非全局，只考虑对发生极大波束间干扰(即发生波束冲突)的UE执行波束再分配，忽视其余UE间波束干扰的存在；其次，波束切换导致UE的数据传输中断使得UE间公平性降低；此外，把发送波束切换至非冲突非直射径(NLOS)波束极易对其它UE引入新干扰。
技术实现思路
本申请的目的在于提供一种波束分配方法，以提升系统容量和满足UE公平性为目标，将数据传输中的波束分配问题建模为以最大化系统效用和为优化目标的最优化问题，并且利用了强化学习领域的Q学习算法完成了最优波束分配方案的迭代求解。一种波束分配方法，包括以下步骤：为用户设备获取备用波束集；在备用波束集中选取最优波束；毫米波基站根据最优波束向用户设备发射波束。如上的，其中，通过获得最大化系统效用和选取最优波束。如上的，其中，利用Q学习方法获得最大化系统效用和。如上的，其中，获得最大化系统效用和包括：初始化：选取k个用户设备作为智能体，根据用户设备的备用波束集确定智能体的动作集合，并设置Q值为0；选取初始化动作；循环如下步骤，使Q值收敛，直至获得最优波束；根据智能体对动作的反馈获得回报函数；回报函数之差是否小于预定义门限；若回报函数之差大于预定义门限，根据回报函数与Q值的对比结果更新Q值；选取智能体的下一个动作；若回报函数之差小于预定义门限，则该选取的动作为最优波束。如上的，其中，回报函数为其中，ln(rk)为第k个用户的效用函数，rk为第k个用户设备获得数据速率，s为动作所对应的环境状态。如上的，其中，用回报函数和当前的Q值中较大的一个更新Q值。如上的，其中，选取智能体下一个动作包括以下步骤：产生随机数xk∈[0,1]；将随机数与预定义参数ε∈(0,1)进行对比；若xk<ε，则从动作集合Vk中任选一个动作作为初始化动作；反之，则选取最大Q值对应的动作为初始化动作。如上的，其中，选取初始化动作为在动作集合中任选一个动作。如上的，其中，备选波束集为LOS径波束和所有NLOS径波束的组合。如上的，其中，动作所对应的环境为单状态环境。本申请具有以下技术效果：(1)本申请的波束分配方法能够以用户效用和为最大化目标，提高了用户间的传输速率的公平性。(2)本申请的波束分配方法将LOS径波束和所有NLOS径波束组合形成UE的备选波束集，解决了波束分配过程中带来的波束间干扰问题。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。图1为本申请提供的波束分配方法流程图；图2为本申请提供的获得最大化系统效用和的流程图；具体实施方式下面结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。通常情况下，多用户设备(UserEquipment，UE)采用全向接收的方式接收信号，不利用波束赋形技术接收信号。假定不同毫米波基站间的距离足够大以忽略小区间的干扰，毫米波基站以等功率PN向不同UE传送数据信号，信道高斯白噪声的功率谱密度定义为N0。第k个UE获得数据速率为rk。第k个UE的效用函数定义为uk＝ln(rk)，则求解效用和最大化问题可以得到满足速率公平的方案。本专利技术根据以上思想，提出了一种大规模天线系统中的波束分配方法。本专利技术以提升系统容量和满足UE公平性为目标，将数据传输中的波束分配问题建模为以最大化系统效用和为优化目标的最优化问题，并且利用了强化学习领域的Q学习算法完成了最优波束分配方案的迭代求解，建立的最优化问题如下：其中第k个UE的效用函数定义为uk＝ln(rk)，K为用户设备的个数，bk为第k个UE选用的数据发送波束，CSk为备选波束集，UE间的波束选择影响了UE获得数据速率。本申请将求解式(3)的问题转化为求解K个智能体的联合最优动作问题，即得到最优波束的分配方法。如图1所示，波束分配方法具体包括以下步骤：步骤S110：初始化过程。具体地，选取K个用户设备作为智能体，根据用户设备的备用波束集确定智能体的动作集合，令Q值为0；具体地，备选波束集的确定包括以下步骤：首先，确定多用户设备(UE)的LOS径波束。具体地，对于第k(1≤k≤K)个UE而言，毫米波基站向其发送的数据信号可通过波束赋形增益最大LOS路径抵达，定义为第k个UE的波束赋形增益最大的LOS径波束。进一步地，确定UE的NLOS径波束，具体地，毫米波信道环境的一个重要特点就是其存在反射径，每个UE的信道环境中存在NS个散射体，并相应形成了NS条NLOS路径使得发送信号可由此NLOS路径到达第k个UE。由上述LOS径波束和NS个NLOS径波束构成第k个UE的备选波束集，定义如下：其中，NT＝|CSk|＝NS+1表示备选波束集元素个数。具体地，每个智能体均有一个动作集合，以第k个智能体为例，其动作集合定义为共有NT个动作，其中vkl(1≤l≤NT)表示第k个UE选取数据发送波束集CSk中的第l个波束时对应的动作。示例性地，每个智能体对应一个动作集合，每个智能体选择的一个动作对应一个Q值，K个智能体的Q值构成一个Q值表，因为动作更新使得Q值发生变化。步骤S120：在备用波束集中选取最优波束；步骤S130：毫米波基站根据所述最优波束向用户设备发射波束。其中通过获得最大化系统效用和实现步骤S120，首先设定波束分配中本文档来自技高网...

【技术保护点】
1.一种波束分配方法，其特征在于，包括以下步骤：为用户设备获取备用波束集；在备用波束集中选取最优波束；毫米波基站根据所述最优波束向用户设备发射波束。

【技术特征摘要】
1.一种波束分配方法，其特征在于，包括以下步骤：为用户设备获取备用波束集；在备用波束集中选取最优波束；毫米波基站根据所述最优波束向用户设备发射波束。2.如权利要求1所述的波束分配方法，其特征在于，通过获得最大化系统效用和选取最优波束。3.如权利要求2所述的波束分配方法，其特征在于，利用Q学习方法获得最大化系统效用和。4.如权利要求3所述的波束分配方法，其特征在于，获得最大化系统效用和包括：初始化：选取k个用户设备作为智能体，根据用户设备的备用波束集确定智能体的动作集合，并设置Q值为0；选取初始化动作；循环如下步骤，使Q值收敛，直至获得最优波束；根据智能体对动作的反馈获得回报函数；回报函数之差是否小于预定义门限；若回报函数之差大于预定义门限，根据回报函数与Q值的对比结果更新Q值；选取智能体的下一个动作；若回报函数之差小于预定义门限，则该选取的动作为最优波束。5.如权利要求4所述的波束...

【专利技术属性】
技术研发人员：张天魁，刘海艳，潘安劼，
申请(专利权)人：北京邮电大学，
类型：发明
国别省市：北京,11