一种基于DQN的自适应hello间隔调节方法技术

本发明专利技术公开的一种基于DQN的自适应hello间隔调节方法，属于通信技术领域。本发明专利技术实现方法为：将时间轴划分成连续的定长时间周期；从网络环境中抽象得到强化学习的问题模型中的状态空间、动作空间和奖励函数；采用全连接的深度强化学习网络DQN作为神经网络框架；将NDN网络设置为环境模块，将深度强化学习网络DQN作为智能体模块；将智能体模块分为决策模块和训练模块两个部分；采用动作执行接口和环境反馈接口实现智能体与环境模块的交互；智能体利用衰减ε贪婪法作为动作选取策略，通过梯度下降法更新主神经网络，并将主神经网络的参数复制给目标神经网络，更新目标神经网路；将通信网络环境中的参数与智能体直接交互，进而实现hello间隔的自适应调节。

【技术实现步骤摘要】

本专利技术涉及一种基于dqn的自适应hello间隔调节方法，属于通信。

技术介绍

1、随着实时通信、视频直播流等业务的流行，数据内容急剧膨胀，移动数据流量飞速增长，内容服务逐渐成为网络服务的主体。面对互联网发展的新趋势，以终端为中心、位置为寻址方式的传统ip网络在移动性、灵活性、扩展性等方面暴露出很多的问题。为了解决当前网络存在的问题，国际学术界提出“以信息为中心”的未来网络体系架构。在众多网络架构中，命名数据网络(named data networking，ndn)因其理念的先进性和成果的丰富性，已成为学术界和产业界集中关注的对象。与传统ip相比，ndn更能适应网络发展的新趋势，首先，在ndn中，内容名称取代ip地址成为数据标识和路由转发的对象，实现了内容与主机位置的解耦，ndn定义了兴趣包(interest packet)和数据包(data packet)两种类型的传输包，一旦兴趣包到达存有对应数据的节点，就会返回数据包，这种拉取数据的通信模式，使得上层应用只关注信息本身，而不关注信息的其他属性(例如来自哪个节点、属于哪个副本)。其次，ndn天然地集成本文档来自技高网...

【技术保护点】

1.一种基于DQN的hello间隔自适应调节方法，其特征在于：包括以下步骤，

2.如权利要求1所述的一种基于DQN的hello间隔自适应调节方法，其特征在于：步骤2具体包括如下子步骤：

3.如权利要求2所述的一种基于DQN的hello间隔自适应调节方法，其特征在于：步骤3具体包括如下子步骤：

4.如权利要求3所述的一种基于DQN的hello间隔自适应调节方法，其特征在于：步骤4具体实现方法为，

5.如权利要求4所述的一种基于DQN的hello间隔自适应调节方法，其特征在于：步骤5具体包括如下子步骤，

6.如权利要求5所述的一种基...

【技术特征摘要】

1.一种基于dqn的hello间隔自适应调节方法，其特征在于：包括以下步骤，

2.如权利要求1所述的一种基于dqn的hello间隔自适应调节方法，其特征在于：步骤2具体包括如下子步骤：

3.如权利要求2所述的一种基于dqn的hello间隔自适应调节方法，其特征在于：步骤3具体包括如下子步骤：

4.如权利要求3所述的一种基于dqn的hello间隔自适应调节方...

【专利技术属性】
技术研发人员：张宇，王一鸣，袁梦泽，李政翰，刘周杰，李彤，
申请(专利权)人：北京理工大学，
类型：发明
国别省市：