【技术实现步骤摘要】
数据转发路径规划方法、装置以及电子设备
[0001]本专利技术涉及路径规划
,具体而言,涉及一种数据转发路径规划方法、装置以及电子设备。
技术介绍
[0002]目前,电力数据大规模的增长,造成了网络路径拥塞以及无法在有限时间段内完成传输的问题,从而导致了路径中资源利用不理想的情况。相关技术中对传输业务不加区分的进行优化,没有考虑到实际传输场景传输业务的差异化需求,存在着算法性能不稳定以及容易陷入局部最优的问题,导致传输路径规划不合理,进而造成传输效率低的问题。
[0003]针对上述的问题,目前尚未提出有效的解决方案。
技术实现思路
[0004]本专利技术实施例提供了一种数据转发路径规划方法、装置以及电子设备,以至少解决相关技术中存在的路径选择不合理、传输效率低的技术问题。
[0005]根据本专利技术实施例的一个方面,提供了一种数据转发路径规划方法,包括:获取目标数据包,所述目标数据包对应的初始节点,以及所述初始节点对应的初始节点信息;根据所述初始节点信息,采用深度强化学习算法进行计算,得 ...
【技术保护点】
【技术特征摘要】
1.一种数据转发路径规划方法,其特征在于,包括:获取目标数据包,所述目标数据包对应的初始节点,以及所述初始节点对应的初始节点信息;根据所述初始节点信息,采用深度强化学习算法进行计算,得到当前转发节点,并将所述目标数据包发送至所述当前转发节点;在确定所述当前转发节点不是终止节点的情况下,根据所述目标数据包发送至所述当前转发节点的转发过程,更新所述初始节点对应的经验池,其中,所述经验池存储有历史转发过程信息;基于所述经验池更新所述深度强化学习算法;根据所述当前转发节点对应的第一节点信息,采用更新后的所述深度强化学习算法进行计算,得到下一转发节点,并将所述目标数据包发送至所述下一转发节点。2.根据权利要求1所述的方法,其特征在于,还包括:判断所述下一转发节点是否为所述终止节点;若所述下一转发节点不是所述终止节点,则循环执行以下操作,直至得到的下一转发节点为所述终止节点:将下一转发节点作为新的当前转发节点,根据所述目标数据包发送至新的当前转发节点的转发过程,更新所述新的当前转发节点的前一节点对应的经验池;基于所述前一节点对应的经验池更新深度强化学习算法,得到更新后的深度强化学习算法;根据所述新的当前转发节点对应的节点信息,采用所述更新后的深度强化学习算法进行计算,得到新的下一转发节点。3.根据权利要求1所述的方法,其特征在于,所述初始节点信息至少包括:所述目标数据包对应的属性信息、所述初始节点对应的第一拥堵状态和第一资源状态,所述初始节点的相邻节点对应的第二拥堵状态和第二资源状态,获取所述目标数据包对应的所述初始节点信息,包括:根据所述初始节点中的第一待转发数据量确定所述第一拥堵状态;根据所述初始节点对应的第一缓存容量和第一带宽,确定所述第一资源状态;根据所述相邻节点中的第二待转发数据量确定所述第二拥堵状态;根据所述相邻节点对应的第二缓存容量和第二带宽,确定所述第二资源状态。4.根据权利要求3所述的方法,其特征在于,所述根据所述初始节点信息,采用所述深度强化学习算法进行计算,得到当前转发节点,并将所述目标数据包发送至所述当前转发节点,包括:获取所述目标数据包对应的可传输节点集合;根据所述初始节点对应的所述相邻节点和所述可传输节点集合,得到转发节点集合;根据所述初始节点信息,采用所述深度强化学习算法进行计算,从所述转发节点集合中确定所述当前转发节点,并将所述目标数据包发送至所述当前转发节点。5.根据权利要求3所述的方法,其特征在于,所述在确定所述当前转发节点不是终止节点的情况下,根据所述目标数据包发送至所述当前转发节点的转发过程,更新初始节点对应的经验池,包括:获取所述当前转发节点对应的传输标志,其中,所述传输标志用于指示所述目标数据包是否到达所述终止节点;
获取所述转发过程对应的传输奖励信息,其中,所述传输奖励信息是基于所述目标数据包对应的传输时间信息和...
【专利技术属性】
技术研发人员:郝佳恺,温明时,赵永强,张军,张伍伟,李金友,金明,刘晓宸,海天翔,李俊芹,刘庆时,田蕊,王申,宋志鸿,董峥,
申请(专利权)人:国家电网有限公司北京邮电大学,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。