一种ICV网络中物理层安全资源分配方法组成比例

一种ICV网络中物理层安全资源分配方法，解决了现有分配方式不能优化V2V时延的问题，属于无线通信技术领域。本发明专利技术包括：S1、每个V2V链路中的发送车辆为一个智能体，智能体采用深度强化学习网络实现，包括训练后的目标网络和实时网络，目标网络用于对实时网络的参数进行更新；S2、每个智能体得到环境的局部观测，包括合法、干扰和窃听信道的信息、发送载荷、时延限制、目标网络的训练迭代次数和探索利用概率；S3、每个智能体根据局部观测利用实时网络输出动作，该动作包括发送信号占用的频带和发射功率；S4、所有智能体的目标网络从环境收到同一个奖励，环境进入到下一时刻的全局状态，转入S2，奖励包括系统保密容量和时延限制。

【技术实现步骤摘要】
一种ICV网络中物理层安全资源分配方法
本专利技术涉及一种ICV(IntelligentConnectedVehicle，智能网联车)网络中基于强化学习的资源分配方法，属于无线通信

技术介绍
近些年来，通信技术迅速发展，5G第一阶段已经在3GPPR15中被冻结，其中，包括V2X(VehicletoEverything，车与外界的信息交换)在内的车联网技术成为5G的研究重点，车联网成为5G的主要应用场景之一。中国采用基于LTE和5G的V2X通信技术在近些年成为智能交通系统的主要技术，V2V(Vehicle-to-Vehicle，车-车通信)技术具有更广泛的通信范围，更低的延迟和更高的传输速率，能够适应各种应用场景。V2X包括V2I(Vehicle-to-Infrastructure，车-基础设施通信)和V2V等，其中车辆到基站的V2I链路主要传递高速率的娱乐、视频等业务，车辆到车辆的V2V链路主要传递低速率低时延的道路、车辆、交通等信息。由于频谱资源的稀缺，允许V2V链路复用V2I链路的频谱资源，可以大幅提高频谱效率。但是会不可本文档来自技高网...

【技术保护点】
1.一种ICV网络中物理层安全资源分配方法，其特征在于，所述方法包括如下步骤：/nS1、每个V2V链路中的发送车辆为一个智能体，所述智能体采用深度强化学习网络实现，包括训练后的目标网络和实时网络，目标网络用于对实时网络的参数进行更新；/nS2、在时刻t，每个智能体得到环境的局部观测

【技术特征摘要】
1.一种ICV网络中物理层安全资源分配方法，其特征在于，所述方法包括如下步骤：
S1、每个V2V链路中的发送车辆为一个智能体，所述智能体采用深度强化学习网络实现，包括训练后的目标网络和实时网络，目标网络用于对实时网络的参数进行更新；
S2、在时刻t，每个智能体得到环境的局部观测环境的全局状态为St，第k个智能体的局部观测是全局状态St的子集；
其中，包括可观测的合法信道、干扰信道和窃听信道的信息、第k个智能体需要发送的载荷、时延限制、目标网络的训练迭代次数e和探索利用概率ε；
S3、每个智能体根据利用实时网络输出动作所有的智能体的动作构成联合动作At；
其中，包括发送信号占用的频带和发射功率；
S4、所有的智能体的目标网络从环境收到同一个奖励Rt，环境进入到下一时刻的全局状态St+1，转入S2；
其中，λV2I和λV2V分别为V2I链路奖励因子和V2V链路奖励因子；

表示在t时刻第m个V2I链路的保密容量，M表示V2I链路的数量；
V2V链路传输时延对应的奖励为Lk[t]，
X是一个常量，X大于V2V链路最大保密速率，控制变量ρk[m]的取值为1或0，ρk[m]＝1表示第k个V2V链路使用了第m个子频带，ρk[m]＝0表示第k个V2V链路没有使用第m个子频带，表示在t时刻第k个V2V链路的保密容量，K表示V2V链路的数量。


2.根据权利要求1所述的ICV网络中物理层安全资源分配方法，其特征在于，所述局部观测：



其中，Tk表示剩余传输时间，Ik[m]表示全频段的干扰，gk[m]表示第k个V2V链路本身的信道增益，gk',k[m]表示来自其他V2V链路的干扰信道，k'≠k，gk,B[m]表示V2V链路发送车辆到基站的信道增益，表示来自其他V2I链路发送车辆的干扰信道，gk,e[m]表示窃听者窃听第k个V2V链路的窃听信道增益，gm,e[m]表示窃听者窃听第m个V2I链路的窃听信道增益。


3.根据权利要求2所述的ICV网络中物理层安全资源分配方法，其特征在于，所述每个智能体有N×M个动作,N表示V2V链路发射功率离散化后的等级数量。


4.根据权利要求3所述的ICV网络中物理层安全资源分配方法...

【专利技术属性】
技术研发人员：陈晓华，李瑞恩，罗雪文，林庆丰，于启月，
申请(专利权)人：哈尔滨工业大学，
类型：发明
国别省市：黑龙江;23