用于异构网络几乎空白子帧的配置方法及装置、电子设备制造方法及图纸

本申请涉及无线通信技术领域，公开一种用于异构网络几乎空白子帧的配置方法，包括：使用排队论对小基站与无线接入点共存的异构网络进行建模；获得异构网络的当前时延性能状态；获得基于强化学习得到的目标折扣回报表；根据当前时延性能状态以及目标折扣回报表的折扣回报参数值确定执行ABS子帧动作所配置的ABS子帧数量；按照ABS子帧数量对小基站的ABS子帧进行配置。在后续ABS子帧决策中能够较好地利用以往学习经验，从而做出更为合理的ABS配置决策，提高LTE和WiFi异构网络的系统总体时延性能，进而提升LTE和WiFi用户的满意度和业务使用体验。本申请还公开一种用于异构网络几乎空白子帧的配置装置及电子设备。几乎空白子帧的配置装置及电子设备。几乎空白子帧的配置装置及电子设备。

【技术实现步骤摘要】
用于异构网络几乎空白子帧的配置方法及装置、电子设备


[0001]本申请涉及无线通信
，例如涉及一种用于异构网络几乎空白子帧的配置方法及装置、电子设备。

技术介绍

[0002]在长期演进(long term evolution，LTE)无线通信系统中，引入异构网络。异构网络指在同一小区可以同时部署宏基站和低功率基站，其中低功率基站包含远程射频单元(RRH)、微微基站(Pico eNB)、家庭基站(Home eNB)、中继基站(relay eNB)等。低功率基站可以用于覆盖小区的热点区域、室内、盲点区域或小区边缘，可以提升小区平均、小区边缘用户吞吐量等。将LTE部署在非授权频段的技术称为LTE
‑
U(Unlicensed)，使用的是低于6GHz的非授权频段，主要是指2.4G和5.8GHz两个频段，这两个频段已经部署有WiFi、蓝牙、雷达等无线通信系统，LTE
‑
U作为后来者，需要解决好LTE与现有无线通信网络(尤其是WiFi网络)之间的共存与干扰问题。相关技术中，可以使用基于Non
‑
LBT(Listen
‑
before
‑
talk)的方法处理LTE
‑
U和WiFi系统之间的共存与干扰问题。Non
‑
LBT机制中，LTE
‑
U会周期性的静默一段时间，在该段时间内不发送或几乎不发送数据，从而使WiFi有更多机会发送数据，这些不发送数据的子帧称为几乎空白子帧(Almost Blank Subframe，ABS)。
[0003]在实现本公开实施例的过程中，发现相关技术中至少存在如下问题：依据LTE基站状态信息更新ABS比例或者依据基站反馈信息对ABS子帧进行调度，异构网络的时延性能以及用户对业务的使用体验和满意度都较差。

技术实现思路

[0004]为了对披露的实施例的一些方面有基本的理解，下面给出了简单的概括。所述概括不是泛泛评述，也不是要确定关键/重要组成元素或描绘这些实施例的保护范围，而是作为后面的详细说明的序言。
[0005]本公开实施例提供了一种用于异构网络几乎空白子帧的配置方法及装置、电子设备，以解决现有技术依据LTE基站状态信息更新ABS比例或者依据基站反馈信息对ABS子帧进行调度，异构网络的时延性能较差的问题。
[0006]在一些实施例中，用于异构网络几乎空白子帧的配置方法包括：使用排队论对小基站与无线接入点共存的异构网络进行建模；获得异构网络的当前时延性能状态；获得基于强化学习得到的目标折扣回报表；其中，目标折扣回报表包括异构网络处于不同时延性能状态时，小基站执行不同几乎空白子帧ABS子帧动作所对应的多个折扣回报参数值；根据当前时延性能状态以及折扣回报参数值确定执行ABS子帧动作所配置的ABS子帧数量；按照ABS子帧数量对小基站的ABS子帧进行配置。
[0007]在一些实施例中，用于异构网络几乎空白子帧的配置装置包括处理器和存储有程序指令的存储器，处理器被配置为在执行程序指令时，执行前述用于异构网络几乎空白子帧的配置方法。
[0008]在一些实施例中，电子设备包括前述用于异构网络几乎空白子帧的配置装置。
[0009]本公开实施例提供的用于异构网络几乎空白子帧的配置方法及装置、电子设备，可以实现以下技术效果：
[0010]在对小基站的ABS子帧进行配置时，获得基于强化学习得到的目标折扣回报表，根据异构网络的当前时延性能状态以及目标折扣回报表的折扣回报参数值确定小基站执行ABS子帧动作所配置的ABS子帧数量，并按照ABS子帧数量对小基站的ABS子帧进行配置。这样，基于强化学习的几乎空白子帧配置方法(QL
‑
ABS)，在后续ABS子帧决策能够较好地利用以往学习经验，从而做出更为合理的ABS配置决策，提高LTE和WiFi异构网络的系统总体时延性能，进而提升用户的业务使用体验和满意度。
[0011]以上的总体描述和下文中的描述仅是示例性和解释性的，不用于限制本申请。
附图说明
[0012]一个或多个实施例通过与之对应的附图进行示例性说明，这些示例性说明和附图并不构成对实施例的限定，附图中具有相同参考数字标号的元件示为类似的元件，附图不构成比例限制，并且其中：
[0013]图1是本公开实施例提供的一个用于异构网络几乎空白子帧的配置方法的应用场景示意图；
[0014]图2是本公开实施例提供的一个用于异构网络几乎空白子帧的配置方法的流程示意图；
[0015]图3是本公开实施例提供的另一个用于异构网络几乎空白子帧的配置方法的流程示意图；
[0016]图4是本公开实施例提供的不同用户数平均包时延性能的示意图；
[0017]图5(a)是本公开实施例提供的WiFi AP平均包时延的结果示意图；
[0018]图5(b)是本公开实施例提供的LTE
‑
U SBS平均包时延的结果示意图；
[0019]图6(a)是本公开实施例提供的连续两天动态变化业务量的示意图；
[0020]图6(b)是本公开实施例提供的QL
‑
ABS算法在线性能的示意图；
[0021]图7是本公开实施例提供的一个用于异构网络几乎空白子帧的配置装置的结构示意图。
具体实施方式
[0022]为了能够更加详尽地了解本公开实施例的特点与
技术实现思路
，下面结合附图对本公开实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本公开实施例。在以下的技术描述中，为方便解释起见，通过多个细节以提供对所披露实施例的充分理解。然而，在没有这些细节的情况下，一个或多个实施例仍然可以实施。在其它情况下，为简化附图，熟知的结构和装置可以简化展示。
[0023]本公开实施例的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开实施例的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含。
[0024]除非另有说明，术语“多个”表示两个或两个以上。本公开实施例中，字符“/”表示前后对象是一种“或”的关系。例如，A/B表示：A或B。术语“和/或”是一种描述对象的关联关系，表示可以存在三种关系。例如，A和/或B，表示：A或B，或，A和B这三种关系。
[0025]结合图1所示的用于异构网络几乎空白子帧的配置方法的应用场景示意图，由一个宏基站(Macro BS)、一个LTE
‑
U小基站(Small BS/SBS)、一个WiFi无线接入点AP(Access Point)组成网络模型，分别有N
l
个SBS用户设备(UE)和N
w
个WiFi终端(STA)。LTE基站可与WiFi AP进行协作式信息交互。在较低的授权频带，UE的控制数据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于异构网络几乎空白子帧的配置方法，其特征在于，包括：使用排队论对小基站与无线接入点共存的异构网络进行建模；获得所述异构网络的当前时延性能状态；获得基于强化学习得到的目标折扣回报表；其中，所述目标折扣回报表包括所述异构网络处于不同时延性能状态时，所述小基站执行不同几乎空白子帧ABS子帧动作所对应的多个折扣回报参数值；根据所述当前时延性能状态以及所述折扣回报参数值确定执行ABS子帧动作所配置的ABS子帧数量；按照所述ABS子帧数量对所述小基站的ABS子帧进行配置。2.根据权利要求1所述的配置方法，其特征在于，所述获得基于强化学习得到的目标折扣回报表，包括：获得在前一ABS子帧配置周期中的所述小基站数据发送时段得到的所述异构网络的时延性能，并获得所述时延性能与目标时延性能的绝对差值；控制所述小基站在当前时延性能状态选择并执行下一ABS子帧动作，并确定所述小基站在下一时延性能状态的最小折扣回报参数值；基于当前折扣回报参数值、所述绝对差值以及所述最小折扣回报参数值计算获得最新当前折扣回报参数值；其中，所述当前折扣回报参数值为所述小基站在当前时延性能状态执行当前ABS子帧动作所对应的折扣回报参数值；利用所述最新当前折扣回报参数值更新所述当前折扣回报参数值以得到所述目标折扣回报表。3.根据权利要求2所述的配置方法，其特征在于，所述基于当前折扣回报参数值、所述绝对差值以及所述最小折扣回报参数值计算获得最新当前折扣回报参数值，包括：按照如下公式计算获得所述最新当前折扣回报参数值：其中，Q(s
j
，a
k
)为当前折扣回报参数值，为最小折扣回报参数值，s
j
为当前时延性能状态，a
k
为当前ABS子帧动作，s
j
′
为下一时延性能状态，a
k
′
为下一ABS子帧动作，α为学习率，c为绝对差值，γ为折扣因子。4.根...

【专利技术属性】
技术研发人员：林粤伟，胡希嘉，
申请(专利权)人：青岛科技大学，
类型：发明
国别省市：