基于门限残差网络的虚拟现实设备集群带宽分配装置制造方法及图纸

技术编号:19219614 阅读:30 留言:0更新日期:2018-10-20 08:10
本发明专利技术公开了一种基于门限残差网络的虚拟现实设备集群带宽分配装置,包括用于输出带宽分配决策的控制系统和用于分配虚拟现实设备集群各节点带宽的执行系统,分配装置还包括用于获取并输出虚拟现实设备集群的带宽信息的检测系统,控制系统以检测系统检测的带宽信息作为输入和反馈,以执行系统执行的行动作为输出,通过门限残差网络对获得的带宽信息进行高低维度转换,通过策略网络作出决策,通过评价网络评价决策,计算网络的损失后更新网络的参数。本发明专利技术能够有效地控制具有连续动作空间的面向具有多个虚拟现实设备的带宽分配技术,能够在无监督信号的情况下,自主学习更新神经网络的参数,以使有限的带宽达到最优分配。

【技术实现步骤摘要】
基于门限残差网络的虚拟现实设备集群带宽分配装置
本专利技术涉及人工智能及控制
,具体涉及一种基于门限残差网络的虚拟现实设备集群带宽分配。
技术介绍
虚拟现实技术是一种可以创建和体验虚拟世界的计算机仿真系统,它利用计算机生成一种模拟环境,是一种多源信息融合的、交互式的三维动态视景和实体行为的仿真系统,使用户沉浸到该环境中。目前,基于虚拟现实的体验式交互模式开始得到大量的推广,越来越多的基于虚拟现实的设备进入到各类公司、单位和教学机构中。随着一个虚拟现实环境中连入的设备越来越多,需要分配的带宽也不断增加。在很多虚拟现实的应用中,连入到虚拟现实系统的设备具有不确定性和动态性,系统很难预测设备何时连入,在连入期间所需带宽的情况,设备何时退出;但是,目前多数虚拟现实系统中的带宽分配装置采用固定的分配方案,无法进行自主学习,不能根据实时情况实时调整带宽分配方案,也无法根据连入设备对带宽的实际要求情况做出合理的分配,因此,很难适应有大量虚拟现实连入设备系统中带有不确定性和动态性带宽使用特点的要求。如何对具有大量虚拟现实设备连入的系统进行有效的带宽管理已成为迫切需要解决的问题。
技术实现思路
本专本文档来自技高网
...

【技术保护点】
1.一种基于门限残差网络的虚拟现实设备集群带宽分配装置,包括用于输出带宽分配决策的控制系统和用于分配虚拟现实设备集群各节点带宽的执行系统,其特征在于,所述分配装置还包括用于获取并输出虚拟现实设备集群的带宽信息的检测系统,所述控制系统以所述检测系统检测的带宽信息作为输入和反馈,以所述执行系统执行的行动作为输出,通过门限残差网络对获得的带宽信息进行高低维度转换,通过策略网络作出决策,通过评价网络评价决策,计算网络的损失后更新网络的参数;所述控制系统通过如下方法作出决策:步骤1、初始化各网络的参数和强化学习算法的参数;步骤2、获取虚拟现实设备集群的当前带宽信息并通过所述门限残差网络将所获取的高维度带...

【技术特征摘要】
1.一种基于门限残差网络的虚拟现实设备集群带宽分配装置,包括用于输出带宽分配决策的控制系统和用于分配虚拟现实设备集群各节点带宽的执行系统,其特征在于,所述分配装置还包括用于获取并输出虚拟现实设备集群的带宽信息的检测系统,所述控制系统以所述检测系统检测的带宽信息作为输入和反馈,以所述执行系统执行的行动作为输出,通过门限残差网络对获得的带宽信息进行高低维度转换,通过策略网络作出决策,通过评价网络评价决策,计算网络的损失后更新网络的参数;所述控制系统通过如下方法作出决策:步骤1、初始化各网络的参数和强化学习算法的参数;步骤2、获取虚拟现实设备集群的当前带宽信息并通过所述门限残差网络将所获取的高维度带宽信息转换为低维度特征信息,所述带宽信息包括带宽上限信息、带宽传输速率信息以及带宽产生速率信息;步骤3、以当前状态st作为输入,通过所述策略网络计算采取并输出当前行动at,获得下一状态st+1和立即奖赏rt,其中,当前状态st为带宽分配前虚拟现实设备集群的特征信息;当前行动at为带宽分配时虚拟现实设备集群各节点增加或减少带宽分配;下一状态st+1为带宽分配后虚拟现实设备集群的特征信息;立即奖赏rt为带宽分配后虚拟现实设备集群带宽信息的传输速度tv1与产生速度tv2的差值的绝对值的负值,即rt=-|tv1-tv2|;步骤4、以当前状态st作为输入,通过所述评价网络计算计算强化学习算法评价函数V(st)的值;步骤5、计算控制系统整个网络模型的总损失,判断当前行动at所属步数是否超过设定步数,如是,则更新所述门限残差网络、所述策略网络以及所述评价网络的参数,如否,则更新所述策略网络以及所述评价网络的参数;步骤6、判断当前带宽利用率和带宽传输效率是否超过预设值,如是,则停止训练,如否,则返回步骤3继续循环训练。2.根据权利要求1所述的虚拟现实设备集群带宽分配装置,其特征在于,所述控制系统为本地控制系统,在本地完成控制操作。3.根据权利要求1所述的虚拟现实设备集群带宽分配装置,其特征在于,所述控制系统通过所述检测系统向所述执行系统传递分配指令。4.根据权利要求1所述的虚拟现实设备集群带宽分配装置,其特征在于,步骤1中,所述门限残差网络的参数的初始化值为通过监督学习方法提前训练的一个可用参数。5.根据权利要求1所述的虚拟现实设备集群带宽分配装置,其特征在于,步骤2中,采用153层门限残差网络进行带宽信息的高低维度转换,门限残差网络由4类共50个门限残差块组成,每个门限残差块由三层卷积层、一个门限...

【专利技术属性】
技术研发人员:景栋盛杨钰薛劲松朱斐
申请(专利权)人:国网江苏省电力有限公司苏州供电分公司
类型:发明
国别省市:江苏,32

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1