本发明专利技术公开了一种分配方法，该方法包括：接收终端设备针对数据包的发送请求，将数据包和终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从无线系统的空闲频谱资源中为数据包确定出频谱资源，将频谱资源分配给终端设备。本发明专利技术实施例还同时公开了一种分配装置，网络设备和计算机存储介质，提高了无线系统中频谱资源的分配准确性，进而提高了无线系统中频谱资源的利用率。进而提高了无线系统中频谱资源的利用率。进而提高了无线系统中频谱资源的利用率。
【技术实现步骤摘要】
一种分配方法、装置、网络设备和计算机存储介质
[0001]本专利技术涉及频谱资源的分配技术，尤其涉及一种分配方法、装置、网络设备和计算机存储介质。
技术介绍
[0002]目前，工业、科学和医疗等非授权频段十分拥挤，而大量的频段却经常处于空闲状态；由此可以看出，现有的频谱资源的分配方法存在频谱资源的利用率低下的技术问题。
技术实现思路
[0003]有鉴于此，本专利技术提供一种分配方法、装置、网络设备和计算机存储介质，以解决现有技术中存在的频谱资源的利用率低下的技术问题。
[0004]本专利技术的技术方案是这样实现的：
[0005]第一方面，本专利技术实施例提供了一种分配方法，包括：
[0006]接收终端设备针对数据包的发送请求；
[0007]将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源；
[0008]将所述频谱资源分配给所述终端设备；其中，所述频谱资源用于所述终端设备接入并发送所述数据包；
[0009]其中，所述训练好的A3C算法，采用下述方式训练得到：
[0010]获取待训练的数据包和所述待训练的数据包所处的无线系统中频谱资源的信息；
[0011]将所述待训练的数据包和所述待训练的数据包所处的无线系统中频谱资源的信息，输入至预设的A3C算法中进行训练，得到所述训练好的A3C算法。
[0012]在上述方法中，在将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源之后，所述方法还包括：
[0013]当所述频谱资源与第一频谱资源未发生冲突时，将所述频谱资源分配给所述终端设备；其中，所述第一频谱资源包括为其他终端设备的数据包确定出的频谱资源；
[0014]当所述频谱资源与所述第一频谱资源发生冲突时，根据预先记录的所述频谱资源的优先级，确定是否将所述频谱资源分配给所述终端设备。
[0015]在上述方法中，所述方法还包括：
[0016]当所述训练好的A3C算法中奖励函数的函数值为第一预设阈值时，确定所述频谱资源与为所述第一频谱资源发生冲突；
[0017]当所述训练好的A3C算法中奖励函数的函数值为第二预设阈值时，确定所述频谱资源与所述第一频谱资源未发生冲突。
[0018]在上述方法中，所述根据预先记录的所述频谱资源的优先级，确定是否将所述频谱资源分配给所述数据包，包括：
[0019]从所述预先记录的所述频谱资源的优先级中，确定出所述终端设备的优先级和所述其他终端设备的优先级；
[0020]当所述终端设备的优先级高于所述其他终端设备的优先级时，将所述频谱资源分配给所述终端设备，并将所述终端设备的优先级加一；
[0021]当所述终端设备的优先级低于或者等于所述其他终端设备的优先级时，返回执行所述将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源，并将所述其他终端设备的优先级加一。
[0022]在上述方法中，所述将所述待训练的数据包和所述待训练的数据包所处的无线系统中频谱资源的信息，输入至预设的A3C算法中进行训练，得到所述训练好的A3C算法，包括：
[0023]基于所述待训练的数据包和所述待训练的数据包所处的无线系统中频谱资源的信息，根据所述预设的A3C算法中的奖励函数，对所述A3C算法中的Actor网络进行训练，以更新所述A3C算法中的Actor网络的网络参数；
[0024]且，根据所述预设的A3C算法中的优势函数，对所述A3C算法中的Critic网络进行训练，以更新所述A3C算法中的Critic网络的网络参数，得到所述训练好的A3C算法。
[0025]在上述方法中，所述奖励函数的函数值与所述终端设备使用频谱资源时的噪声比占所述无线系统总噪声比的百分比，成正相关。
[0026]在上述方法中，所述奖励函数如下：
[0027][0028]其中，R表示所述奖励函数的函数值，a和b为常数，p
i
表示频谱资源i的信噪比占所述无线系统总信噪比的百分比。
[0029]第二方面，本专利技术提供了一种分配装置，包括：
[0030]接收模块，用于接收终端设备针对数据包的发送请求；
[0031]确定模块，用于将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源；
[0032]分配模块，用于将所述频谱资源分配给所述终端设备；其中，所述频谱资源用于所述终端设备接入并发送所述数据包；
[0033]其中，所述装置还用于采用以下方式得到所述训练好的A3C算法：
[0034]获取待训练的数据包和所述待训练的数据包所处的无线系统中频谱资源的信息；
[0035]将所述待训练的数据包和所述待训练的数据包所处的无线系统中频谱资源的信息，输入至预设的A3C算法中进行训练，得到所述训练好的A3C算法。
[0036]在上述装置中，上述装置还用于：
[0037]在将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源之后，当所述频谱资源与为第一频谱资源未发生冲突时，将所述频谱资源分配给所述终端设备；其中，所述第一频谱资源包括为其他终端设备的数据包确定出的频谱资源；
[0038]当所述频谱资源与所述第一频谱资源发生冲突时，根据预先记录的所述频谱资源的优先级，确定是否将所述频谱资源分配给所述终端设备。
[0039]在上述装置中，上述装置还用于：
[0040]当所述训练好的A3C算法中奖励函数的函数值为第一预设阈值时，确定所述频谱资源与所述第一频谱资源发生冲突；
[0041]当所述训练好的A3C算法中奖励函数的函数值为第二预设阈值时，确定所述频谱资源与所述第一频谱资源未发生冲突。
[0042]在上述装置中，上述装置根据预先记录的所述频谱资源的优先级，确定是否将所述频谱资源分配给所述数据包中，包括：
[0043]从所述预先记录的所述频谱资源的优先级中，确定出所述终端设备的优先级和所述其他终端设备的优先级；
[0044]当所述终端设备的优先级高于所述其他终端设备的优先级时，将所述频谱资源分配给所述终端设备，并将所述终端设备的优先级加一；
[0045]当所述终端设备的优先级低于或者等于所述其他终端设备的优先级时，返回执行所述将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源，并将所述其他终端设备的优先级加一。
[00本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种分配方法，其特征在于，包括：接收终端设备针对数据包的发送请求；将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源；将所述频谱资源分配给所述终端设备；其中，所述频谱资源用于所述终端设备接入并发送所述数据包；其中，所述训练好的A3C算法，采用下述方式训练得到：获取待训练的数据包和所述待训练的数据包所处的无线系统中频谱资源的信息；将所述待训练的数据包和所述待训练的数据包所处的无线系统中频谱资源的信息，输入至预设的A3C算法中进行训练，得到所述训练好的A3C算法。2.根据权利要求1所述的方法，其特征在于，在将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源之后，所述方法还包括：当所述频谱资源与第一频谱资源未发生冲突时，将所述频谱资源分配给所述终端设备；其中，所述第一频谱资源包括为其他终端设备的数据包确定出的频谱资源；当所述频谱资源与所述第一频谱资源发生冲突时，根据预先记录的所述频谱资源的优先级，确定是否将所述频谱资源分配给所述终端设备。3.根据权利要求2所述的方法，其特征在于，所述方法还包括：当所述训练好的A3C算法中奖励函数的函数值为第一预设阈值时，确定所述频谱资源与所述第一频谱资源发生冲突；当所述训练好的A3C算法中奖励函数的函数值为第二预设阈值时，确定所述频谱资源与所述第一频谱资源未发生冲突。4.根据权利要求2所述的方法，其特征在于，所述根据预先记录的所述频谱资源的优先级，确定是否将所述频谱资源分配给所述数据包，包括：从所述预先记录的所述频谱资源的优先级中，确定出所述终端设备的优先级和所述其他终端设备的优先级；当所述终端设备的优先级高于所述其他终端设备的优先级时，将所述频谱资源分配给所述终端设备，并将所述终端设备的优先级加一；当所述终端设备的优先级低于或者等于所述其他终端设备的优先级时，返回执行所述将所述数据包和所述终端设备所处的无线系统中频谱资源的信息，输入至预先训练好的A3C算法中，从所述无线系统的空闲频谱资源中为所述数据包确定出频谱资源，并将所述其他终端设备的优先级加一。5.根据权...
【专利技术属性】
技术研发人员：吴得全，杭晶晶，
申请(专利权)人：中国移动通信集团有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。