一种网络控制方法、装置及基站制造方法及图纸

本发明专利技术提供一种网络控制方法、装置及基站，涉及通信技术领域。该方法包括：接收终端在第一时间上报的第一状态；将第一状态输入预测模型，预测目标时间间隔后的第二状态；其中，目标时间间隔与基站的处理时间相关，第一状态和第二状态用于指示终端的物理性能参数；根据第二状态，确定终端的调控决策；根据调控决策，对终端进行调控。本发明专利技术的方案，解决了移动网络控制方案中自主性与实时性差的问题。控制方案中自主性与实时性差的问题。控制方案中自主性与实时性差的问题。

【技术实现步骤摘要】
一种网络控制方法、装置及基站


[0001]本专利技术涉及通信
，特别是指一种网络控制方法、装置及基站。

技术介绍

[0002]常见的移动网络自主控制方法有以下两种：一是采用基于人工经验制定的规则对网络进行调控，二是采用机器学习算法对网络进行监控与分析，并做出对应的控制措施。
[0003]移动网络是动态变化的，可以提供多种服务，在不同的环境和应用下，移动网络应根据具体实例进行动态的调整。当网络出现问题时，也应对网络进行调控。现有的移动网络控制方案中，人工的方法会消耗大量的人工劳动，基于机器学习的算法对网络控制有了一定的改善，但缺乏自主性与实时性。

技术实现思路

[0004]本专利技术的目的是提供一种网络控制方法、装置及基站，已解决移动网络控制方案中自主性与实时性差的问题。
[0005]为达到上述目的，本专利技术的实施例提供一种网络控制方法，应用于基站，包括：
[0006]接收终端在第一时间上报的第一状态；
[0007]将第一状态输入预测模型，预测目标时间间隔后的第二状态；其中，目标时间间隔与基站的处理时间相关，第一状态和第二状态用于指示终端的物理性能参数；
[0008]根据第二状态，确定终端的调控决策；
[0009]根据调控决策，对终端进行调控。
[0010]可选地，根据所述调控决策，对所述终端进行调控的步骤，包括：
[0011]在第二时间将所述调控决策发送至所述终端，以使所述终端根据所述调控决策调整物理性能参数。
[0012]可选地，所述目标时间间隔为所述第二时间与所述第一时间的差值。
[0013]可选地，根据所述第二状态，确定所述终端的调控决策的步骤，包括：
[0014]将所述第二状态输入数字孪生模型，得到第一调控决策以及所述第一调控决策的奖励；
[0015]将所述第二状态输入强化学习模型，得到第二调控决策以及所述第二调控决策的奖励；
[0016]根据所述第一调控决策、第一调控决策的奖励、第二调控决策以及所述第二调控决策的奖励，确定所述终端的调控决策。
[0017]可选地，所述网络控制方法还包括：
[0018]若所述终端的调控决策为所述第一调控决策，则采用所述终端上报的第一状态以及所述第一状态对应的终端的奖励，进行纠错计算，所述第一状态对应的终端的奖励为所述终端使用所述第一调控决策后确定的；
[0019]若所述终端的调控决策为所述第二调控决策，则采用所述终端上报的第一状态，
进行纠错计算。
[0020]可选地，根据所述第二状态，确定所述终端的调控决策的步骤之后，还包括：
[0021]根据所述第一状态、所述第二状态、所述调控决策以及所述第一状态对应的终端的奖励中的至少一个，更新所述数字孪生模型和所述强化学习模型。
[0022]可选地，所述网络控制方法还包括：
[0023]根据终端的历史状态、历史调控决策和所述历史状态对应的终端的奖励，构建所述数字孪生模型和强化学习模型。
[0024]可选地，所述网络控制方法还包括：
[0025]当至少两次确定的决策前状态相同时，计算第一方差；
[0026]根据所述第一方差，确定是否调整所述数字孪生模型。
[0027]可选地，根据所述第一方差，确定是否调整所述数字孪生模型的步骤，包括：
[0028]若所述第一方差超过第一阈值，则调整所述数字孪生模型；
[0029]若所述第一方差未超过所述第一阈值，则不调整所述数字孪生模型。
[0030]可选地，所述网络控制方法还包括：
[0031]当至少两次预测的第二状态相同时，计算第二方差；
[0032]根据所述第二方差，确定是否调整所述预测模型。
[0033]可选地，根据所述第二方差，确定是否调整所述预测模型的步骤，包括：
[0034]若所述第二方差超过第二阈值，则调整所述预测模型；
[0035]若所述第二方差未超过所述第二阈值，则不调整所述预测模型。
[0036]为达到上述目的，本专利技术的实施例提供一种网络控制装置，应用于基站，所述装置包括：
[0037]接收模块，用于接收终端在第一时间上报的第一状态；
[0038]预测模块，用于将第一状态输入预测模型，预测目标时间间隔后的第二状态；其中，目标时间间隔与基站的处理时间相关，第一状态和第二状态用于指示终端的物理性能参数；
[0039]决策模块，用于根据第二状态，确定终端的调控决策；
[0040]调控模块，用于根据调控决策，对终端进行调控。
[0041]可选地，所述调控模块包括：
[0042]发送单元，用于在第二时间将所述调控决策发送至所述终端，以使所述终端根据所述调控决策调整物理性能参数。
[0043]可选地，所述目标时间间隔为所述第二时间与所述第一时间的差值。
[0044]可选地，所述决策模块包括：
[0045]第一决策单元，用于将所述第二状态输入数字孪生模型，得到第一调控决策以及所述第一调控决策的奖励；
[0046]第二决策单元，用于将所述第二状态输入强化学习模型，得到第二调控决策以及所述第二调控决策的奖励；
[0047]决策单元，用于根据所述第一调控决策、第一调控决策的奖励、第二调控决策以及所述第二调控决策的奖励，确定所述终端的调控决策。
[0048]可选地，所述网络控制装置还包括：
[0049]第一计算模块，用于若所述终端的调控决策为所述第一调控决策，则采用所述终端上报的第一状态以及所述第一状态对应的终端的奖励，进行纠错计算，所述第一状态对应的终端的奖励为所述终端使用所述第一调控决策后确定的；
[0050]第二计算模块，用于若所述终端的调控决策为所述第二调控决策，则采用所述终端上报的第一状态，进行纠错计算。
[0051]可选地，所述的网络控制装置还包括：
[0052]更新模块，用于根据所述第一状态、所述第二状态、所述调控决策以及所述第一状态对应的终端的奖励中的至少一个，更新所述数字孪生模型和所述强化学习模型。
[0053]可选地，所述网络控制装置还包括：
[0054]构建模块，用于根据终端的历史状态、历史调控决策和所述历史状态对应的终端的奖励，构建所述数字孪生模型和强化学习模型。
[0055]可选地，所述网络控制装置还包括：
[0056]第三计算模块，用于当至少两次确定的决策前状态相同时，计算第一方差；
[0057]第一调整模块，用于根据所述第一方差，确定是否调整所述数字孪生模型。
[0058]可选地，所述第一调整模块包括：
[0059]第一调整单元，用于若所述第一方差超过第一阈值，则调整所述数字孪生模型；
[0060]第二调整单元，用于若所述第一方差未超过所述第一阈值，则不调整所述数字孪生模型。
[0061]可选地，所述网络控制装置还包括：
本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种网络控制方法，应用于基站，其特征在于，包括：接收终端在第一时间上报的第一状态；将所述第一状态输入预测模型，预测目标时间间隔后的第二状态；其中，所述目标时间间隔与所述基站的处理时间相关，所述第一状态和所述第二状态用于指示所述终端的物理性能参数；根据所述第二状态，确定所述终端的调控决策；根据所述调控决策，对所述终端进行调控。2.根据权利要求1所述的网络控制方法，其特征在于，根据所述调控决策，对所述终端进行调控的步骤，包括：在第二时间将所述调控决策发送至所述终端，以使所述终端根据所述调控决策调整物理性能参数。3.根据权利要求2所述的网络控制方法，其特征在于，所述目标时间间隔为所述第二时间与所述第一时间的差值。4.根据权利要求1所述的网络控制方法，其特征在于，根据所述第二状态，确定所述终端的调控决策的步骤，包括：将所述第二状态输入数字孪生模型，得到第一调控决策以及所述第一调控决策的奖励；将所述第二状态输入强化学习模型，得到第二调控决策以及所述第二调控决策的奖励；根据所述第一调控决策、第一调控决策的奖励、第二调控决策以及所述第二调控决策的奖励，确定所述终端的调控决策。5.根据权利要求4所述的网络控制方法，其特征在于，还包括：若所述终端的调控决策为所述第一调控决策，则采用所述终端上报的第一状态以及所述第一状态对应的终端的奖励，进行纠错计算，所述第一状态对应的终端的奖励为所述终端使用所述第一调控决策后确定的；若所述终端的调控决策为所述第二调控决策，则采用所述终端上报的第一状态，进行纠错计算。6.根据权利要求4所述的网络控制方法，其特征在于，根据所述第二状态，确定所述终端的调控决策的步骤之后，还包括：根据所述第一状态、所述第二状态、所述调控决策以及所述第一状态对应的终端的奖励中的至少一个，更新所述数字孪生模型和所述强化学习模型。7.根据权利要求4所述的网络控制方法，其特征在于，还包括：根据终端的历史状态、历史调控决策和所述历史状态对应的终端的奖励，构建所述数字孪生模型和强化学习模型。8.根据权利要求4至7任一项所述的网络控制方法，其特征在于，还包括：当至少两次确定的决策前状态相同时，计算第一方差；根...

【专利技术属性】
技术研发人员：邓娟，郑青碧，
申请(专利权)人：中国移动通信集团有限公司，
类型：发明
国别省市：