一种信息处理方法、装置、设备及可读存储介质制造方法及图纸

本申请公开了一种信息处理方法、装置、设备及可读存储介质，涉及通信技术领域，以节约信令开销。该方法包括：接收终端上报的第一信息，其中，所述第一信息包括所述终端对至少一个小区的测量信息；根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略。本申请实施例可以节约信令开销。开销。开销。

【技术实现步骤摘要】
一种信息处理方法、装置、设备及可读存储介质


[0001]本申请涉及通信
，尤其涉及一种信息处理方法、装置、设备及可读存储介质。

技术介绍

[0002]现有的5G架构中引入和中央单元(Central Unit，CU)、DU(Distributed Unit，分布式单元)以及一体化架构的基站。在现网部署中，由于频点越来越高，小区的覆盖范围越来越小，因此，超密集组网以及多频段立体组网是现在用的常用的方式。而这些带来的直接问题就是多连接的链路管路和网络切换的频繁，带来了大量的信令开销。

技术实现思路

[0003]本申请实施例提供一种信息处理方法、装置、设备及可读存储介质，以节约信令开销。
[0004]第一方面，本申请实施例提供了一种信息处理方法，应用于第一网络设备，包括：
[0005]接收终端上报的第一信息，其中，所述第一信息包括所述终端对至少一个小区的测量信息；
[0006]根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略。
[0007]其中，所述多智能体强化学习算法包括模型参数，所述模型参数是从中心数据设备获取的，所述中心数据设备对模型进行集中训练后得到所述模型参数。
[0008]其中，所述接收终端上报的第一信息，包括：
[0009]接收所述终端通过MAC(Medium Access Control，媒体接入控制)CE(Control Element，控制单元)上报的第一信息。
[0010]其中，所述MAC CE包括：测量上报指示信息以及小区的信道信息；所述小区的信道信息包括小区标识以及以下一项或者多项：
[0011]小区的平均速率，吞吐量，信道质量。
[0012]其中，所述根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略，包括：
[0013]基于所述多智能体强化学习算法与所述终端对应的其他网络设备进行协商，确定为所述终端确定对应的资源分配和链路选择策略的网络设备；
[0014]当由所述第一网络设备确定所述终端对应的资源分配和链路选择策略时，利用所述多智能体强化学习算法对所述第一信息进行学习，确定所述终端对应的资源分配和链路选择策略。
[0015]其中，所述根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略，包括：
[0016]与所述终端对应的其他网络设备联合形成候选资源集；
[0017]利用所述多智能体强化学习算法对所述第一信息进行学习，基于所述候选资源集确定所述终端对应的资源分配和链路选择策略；其中，所述其他网络设备确定的所述终端对应的资源分配和链路选择策略与所述第一网络设备确定的所述终端对应的资源分配和链路选择策略一致。
[0018]其中，所述方法还包括以下一项或者多项：
[0019]当需要向其他小区转移负载时，利用所述多智能体强化学习算法确定第二网络设备，其中，所述第一网络设备向所述第二网络设备进行负载转移；
[0020]当需要接收其他小区转移的负载时，接收其他网络设备转移的负载，其中，所述第一网络设备利用所述多智能体强化学习算法确定需要接收其他网络设备转移的负载。
[0021]第二方面，本申请实施例提供了一种信息处理方法，应用于终端，包括：
[0022]上报第一信息，其中，所述第一信息包括所述终端对至少一个小区的测量信息；
[0023]基于网络设备的调度进行数据传输；
[0024]其中，所述网络设备根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略。
[0025]其中，所述多智能体强化学习算法包括模型参数，所述模型参数是从中心数据设备获取的，所述中心数据设备对模型进行集中训练后得到所述模型参数。
[0026]其中，所述上报第一信息包括：
[0027]通过MAC CE上报所述第一信息。
[0028]其中，所述MAC CE包括：测量上报指示信息以及小区的信道信息；所述小区的信道信息包括小区标识以及以下一项或者多项：
[0029]小区的平均速率，吞吐量，信道质量。
[0030]第三方面，本申请实施例提供了一种信息处理装置，应用于第一网络设备，包括：
[0031]第一接收模块，用于接收终端上报的第一信息，其中，所述第一信息包括所述终端对至少一个小区的测量信息；
[0032]第一处理模块，用于根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略。
[0033]其中，所述多智能体强化学习算法包括模型参数，所述模型参数是从中心数据设备获取的，所述中心数据设备对模型进行集中训练后得到所述模型参数。
[0034]其中，所述第一接收模块用于接收所述终端通过MAC CE上报的第一信息。
[0035]其中，所述MAC CE包括：测量上报指示信息以及小区的信道信息；所述小区的信道信息包括小区标识以及以下一项或者多项：
[0036]小区的平均速率，吞吐量，信道质量。
[0037]其中，所述第一处理模块包括：
[0038]第一确定子模块，用于基于所述多智能体强化学习算法与所述终端对应的其他网络设备进行协商，确定为所述终端确定对应的资源分配和链路选择策略的网络设备；
[0039]第一处理子模块，用于当由所述第一网络设备确定所述终端对应的资源分配和链路选择策略时，利用所述多智能体强化学习算法对所述第一信息进行学习，确定所述终端对应的资源分配和链路选择策略。
[0040]其中，所述第一处理模块包括：
[0041]第一处理子模块，用于与所述终端对应的其他网络设备联合形成候选资源集；
[0042]第二处理子模块，用于利用所述多智能体强化学习算法对所述第一信息进行学习，基于所述候选资源集确定所述终端对应的资源分配和链路选择策略；其中，所述其他网络设备确定的所述终端对应的资源分配和链路选择策略与所述第一网络设备确定的所述终端对应的资源分配和链路选择策略一致。
[0043]其中，所述装置还包括以下一个或者多个模块：
[0044]第一确定模块，用于当需要向其他小区转移负载时，利用所述多智能体强化学习算法确定第二网络设备，其中，所述第一网络设备向所述第二网络设备进行负载转移；
[0045]第二接收模块，用于当需要接收其他小区转移的负载时，接收其他网络设备转移的负载，其中，所述第一网络设备利用所述多智能体强化学习算法确定需要接收其他网络设备转移的负载。
[0046]第四方面，本申请实施例提供了一种信息处理装置，应用于终端，包括：
[0047]第一上报模块，用于上报第一信息，其中，所述第一信息包括所述终端对至少一个小区的测量信息；
[0048]第一处理模块，用于基于网络设备的调度进行数据传输；
[0049]其中，所述网络设备根据所述第一信息以及多智能体强本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种信息处理方法，应用于第一网络设备，其特征在于，包括：接收终端上报的第一信息，其中，所述第一信息包括所述终端对至少一个小区的测量信息；根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略。2.根据权利要求1所述的方法，其特征在于，所述多智能体强化学习算法包括模型参数，所述模型参数是从中心数据设备获取的，所述中心数据设备对模型进行集中训练后得到所述模型参数。3.根据权利要求1所述的方法，其特征在于，所述接收终端上报的第一信息，包括：接收所述终端通过媒体接入控制控制单元MAC CE上报的第一信息。4.根据权利要求3所述的方法，其特征在于，所述MAC CE包括：测量上报指示信息以及小区的信道信息；所述小区的信道信息包括小区标识以及以下一项或者多项：小区的平均速率，吞吐量，信道质量。5.根据权利要求1所述的方法，其特征在于，所述根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略，包括：基于所述多智能体强化学习算法与所述终端对应的其他网络设备进行协商，确定为所述终端确定对应的资源分配和链路选择策略的网络设备；当由所述第一网络设备确定所述终端对应的资源分配和链路选择策略时，利用所述多智能体强化学习算法对所述第一信息进行学习，确定所述终端对应的资源分配和链路选择策略。6.根据权利要求1所述的方法，其特征在于，所述根据所述第一信息以及多智能体强化学习算法，确定所述终端对应的资源分配和链路选择策略，包括：与所述终端对应的其他网络设备联合形成候选资源集；利用所述多智能体强化学习算法对所述第一信息进行学习，基于所述候选资源集确定所述终端对应的资源分配和链路选择策略；其中，所述其他网络设备确定的所述终端对应的资源分配和链路选择策略与所述第一网络设备确定的所述终端对应的资源分配和链路选择策略一致。7.根据权利要求5或6所述的方法，其特征在于，所述方法还包括以下一项或者多项：当需要向其他小区转移负载时，利用所述多智能体强化学习算法确定第二网络设备，其中，所述第一网络设备向所述第二网络设备进行负载转移；当需要接收其他小区转移的负载时，接收其他网络设备转移的负载，其中，所述第一网络设备利用所述多智能体强化学习算法确定需要接收其他网络设备转移的负载。8.一种信息处理方法，应用于终端，其特征在于，包括：上报第一信息，其中，所述第一信息包括所述终端对至少一个小区的测量信息；基于网络设备的调度进行数据传输；其中，所述网络设备根据所述第一信息以及多智能体强化...

【专利技术属性】
技术研发人员：王莹莹，田辉，聂高峰，范绍帅，张鹏，
申请(专利权)人：北京邮电大学中国移动通信集团有限公司，
类型：发明
国别省市：