基于内在好奇心机制的多无人机通信系统优化控制方法技术方案

本发明专利技术公开了一种基于内在好奇心机制的多无人机通信系统优化控制方法。目标是学习一种最优的多无人机集中控制策略，使无人机能够通过好奇心驱动的探索找到城市环境中的照明区域，并收集能量，持续稳定地为用户提供通信服务。首先，提出了一种基于强化学习RL的多无人机集中控制策略，以最大化累积通信服务分数。在提出的框架中，由内在好奇心模块ICM产生的好奇心奖励可以作为一种内部激励信号，允许无人机在没有任何先验知识的情况下探索环境。其次，提出了一种两阶段探索协议，便于实际实现。本发明专利技术的方法可以在开发密集型阶段获得更高的累计通信服务分数，获得更为准确的服务路径，并能很好地处理勘探‑开采的权衡。

【技术实现步骤摘要】

本专利技术涉及路径规划，具体涉及一种基于内在好奇心机制的多无人机通信系统优化控制方法。

技术介绍

1、无人驾驶飞行器(uav)作为未来无线通信系统的重要组成部分越来越受欢迎。带有无线电收发器的无人机可以作为移动基站代替地面基站(bss)，为地面用户提供改进的无线电连接和尖端的按需服务，同时在网络开发过程中需要的基础设施大大减少，从而显著降低部署成本。无人机的应用包括网络延伸和增强、救援任务、人群/交通监控、移动边缘计算、缓存内容分发等。目前，对无人机通信的诸多方面进行了全面深入的研究，包括能源管理、计算卸载、路径规划和无线电资源分配。无人机系统中的通信问题通常转化为优化问题，经典方法将其定义为混合整数非凸问题。通常，迭代技术将初始np-hard问题解压缩为更小问题的集合。在基于无人机的通信中，按需服务的复杂性、地形起伏和无人机的移动性导致用户分布、无线信道条件和网络拓扑等特征随着时间的推移而发生变化。

2、无人机通信系统领域的一些研究都在研究能效问题。无人机支持的超密集网络中的功率控制与传统的基于固定基础设施的网络相比，无人机支持的超密集网络表本文档来自技高网...

【技术保护点】

1.基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：包括以下步骤：

2.根据权利要求1所述的基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：所述步骤S1具体包括：

3.根据权利要求1所述的基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：所述步骤S2具体包括：

4.根据权利要求1所述的基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：所述步骤S3具体包括：

5.根据权利要求1所述的基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：所述步骤S4中强化学习三要素包括状态空间St,动...

【技术特征摘要】

1.基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：包括以下步骤：

2.根据权利要求1所述的基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：所述步骤s1具体包括：

3.根据权利要求1所述的基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：所述步骤s2具体包括：

4.根据权利要求1所述的基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：所述步骤s3具体包括：

5.根据权利要求1所述的基于内在好奇心机制的多无人机通信系统优化控制方法，其特征在于：所述步骤s4中强化学习三要素包括状态空间st,动作...

【专利技术属性】
技术研发人员：董璐，丁品乐，徐安迪，叶宇剑，袁心，
申请(专利权)人：东南大学，
类型：发明
国别省市：