基于深度强化学习光无线通信中设备间能量感知频谱管理制造技术

本发明专利技术涉及基于深度强化学习光无线通信中设备间能量感知频谱管理方法，属于光无线通信领域。本发明专利技术提出了一个多智能体强化学习框架优化D2D(Device to Device，设备到设备)选择频谱的性能，通过比较D2D复用可见光或无线通信频谱的等效信干噪比值，构造D2D的频谱可复用关联矩阵，设计将D2D节点的剩余能量和系统能效作为D2D复用光无线通信频谱的奖励函数值，将最大化D2D复用频谱获得的累积折扣奖励的期望值作为优化目标，通过引入基于合作博弈的D2D多智能体行动者‑评论家深度强化学习算法提高D2D频谱复用的累积折扣奖励的期望值。本发明专利技术所述方法可以改善室内光无线通信的小区间负载不均衡、边缘设备通信质量低的问题，提升边缘设备的通信能力和系统的能效。

【技术实现步骤摘要】

本专利技术属于光无线通信，涉及一种基于深度强化学习的光无线通信中设备间能量感知的频谱管理方法。

技术介绍

1、近年来，基于led(light-emitting diode，发光二极管)的可见光通信(visiblelight communication，vlc)技术，由于具有低功耗、高安全性、无电磁干扰等优点，并可提供大约400thz无需授权的频谱，受到研究人员的广泛关注。现有研究表明：vlc可以利用波长为380nm-780nm的可见光波，通过编码好的数据信息控制led的亮灭，实现数据信息的光线传输。在接收端，利用接收设备配置的光电探测器捕捉高速闪烁的led的亮灭情况，并经过一系列的信号处理，可以获得发送端传输的原始数据信息。

2、但是，vlc通信面临诸多问题，如：其数据传输依赖视距链路(line of sight，los)，los链路易被阻挡，vlc的接入点(access point，ap)覆盖范围较小，而多vlc ap密集部署易造成严重的小区间通信干扰等。为克服上述vlc缺点，近年来，有学者提出将vlc和传统rf(radio frequenc本文档来自技高网...

【技术保护点】

1.基于深度强化学习光无线通信中设备间能量感知频谱管理，其特征在于：该方法包括以下步骤：

2.如权利要求1所述的基于深度强化学习光无线通信中设备间能量感知频谱管理，其特征在于：所述S2具体方法为：

3.如权利要求1所述的基于深度强化学习光无线通信中设备间能量感知频谱管理，其特征在于：所述S3具体方法为：

4.如权利要求1所述的基于深度强化学习光无线通信中设备间能量感知频谱管理，其特征在于：所述S4具体方法为：

【技术特征摘要】

1.基于深度强化学习光无线通信中设备间能量感知频谱管理，其特征在于：该方法包括以下步骤：

2.如权利要求1所述的基于深度强化学习光无线通信中设备间能量感知频谱管理，其特征在于：所述s2具体方法为：

3...

【专利技术属性】
技术研发人员：刘焕淋，候杨洋，陈勇，陈浩楠，张玉兰，陈科，
申请(专利权)人：重庆邮电大学，
类型：发明
国别省市：