动态频谱接入系统中最佳感知信道选择方法技术方案

技术编号:19435881 阅读:25 留言:0更新日期:2018-11-14 12:59
本发明专利技术设计出一种基于模糊Q学习方法的最佳感知信道选择方法,该方法中非授权用户通过学习方法在感知信道选择过程中不断摸索,以获得最佳的感知信道集。该方法包括两层学习过程:最佳感知信道选择学习过程以及信道状态学习过程。最佳感知信道选择过程选择将要进行感知的感知信道集输入给信道状态学习过程。信道状态学习过程对其输入的信道集中信道的真实状态进行学习。信道状态学习过程学习到的空闲信道的数量将作为最佳感知信道选择过程的奖赏。通过不断的学习过程,最佳感知信道选择方法可以选择出最佳的感知信道集,即选择的感知信道集中空闲信道的数量最大。

【技术实现步骤摘要】
动态频谱接入系统中最佳感知信道选择方法
本专利技术涉及一种动态频谱接入系统中最佳感知信道选择方法,属于无线电网络

技术介绍
随着5G及超越5G无线通信的迫近,大量的无线设备终端及无线应用将以爆发式的增长速度被部署。为了能够支撑未来无线通信网络中数据的高速实时正确传输,无线领域研究者们正在积极地致力于未来通信技术的研究。其中主要的研究领域包括:毫米波,大规模多输入多输出天线,物联网以及动态频谱接入等等。动态频谱接入技术旨在提升频谱利用效率。在当前无线通信网络中,频谱资源是由频谱资源管理机构管理分配的。频谱资源分为授权频谱和非授权频谱。授权频谱是专门授权给特定用户使用的频谱。例如分配给电视广播使用的频谱。非授权频谱可供无线用户自由使用。因此,可自由使用的非授权频段得到商家的青睐。随着越来越多的使用非授权频段的设备及应用的开发与部署,非授权频段上的通信变的越来越加拥挤。然而,分配给特定用户使用的授权频段却没有被充分的使用。为了更加有效地使用频谱资源来保证更多设备及应用的正常运行,动态频谱接入技术被提出。动态频谱接入是指非授权用户在不干扰授权用户正常通信的情况下可以机会主义的使用授权频谱。在动态频谱接入系统中,非授权用户可以通过频谱感知技术感知到未被授权用户使用的授权频谱。从而,可以在不干扰授权用户正常通信的情况下,机会主义的使用授权频谱资源。频谱感知和频谱接入被视为动态频谱接入技术实施的重要基础。在实际的动态频谱接入系统中,由于硬件的限制,非授权用户面临着感知能力受限及接入能力受限的问题。感知能力受限是指非授权用户在特定给定的时间内无法感知所有的授权频段的状态。非授权用户只可以在给定时间内感知到部分授权频段的状态。接入能力受限是指非授权用户不能同时接入所有可以使用的授权频段。通常情况下,非授权用户可以在给定时间内感知到的非授权频段的个数小于非授权频段的总的个数。此外,非授权用户可同时接入的授权频段的个数通常小于其可感知的授权频段个数。感知信道集及接入信道集的选择直接关系到通信的质量。因此,如何制定高效的感知信道集及接入信道集策略是值得深入研究的。本专利技术旨在感知信道集选择策略的研究。即如何制定感知信道集选择策略从而使得选择的感知信道集中具有较高数量的空闲信道。目前针对动态频谱接入系统中的感知信道选择的相关研究文献如下:1.TianyiXiong等人在2018年的《IEEETransactiononWirelessCommunications》上发表的文章“MultibandSpectrumSensinginCognitiveRadioNetworkswithSecondaryUsersHardwareLimitation:RandomandAdaptiveSpectrumSensingStrategies”中针对具有硬件限制的非授权用户的频谱感知问题进行了深入的研究。在非授权用户硬件的限制下,非授权用户在可以在一个给定的时间阶段感知部分授权频段。这一研究设计了感知频段选择机制用以选择在一个给定的时间阶段将要进行感知的频段。这一研究所设计的感知频段选择机制包括:随机频谱感知策略及适应频谱感知策略。随机频谱感知策略即以随机的方式选择将要感知的频谱集。适应频谱感知策略即以适应性的方式来决定将要感知的频谱集。在适应频谱感知策略中,非授权用户可以根据授权用户的状态转移模型及授权用户的传输向量决定下一时刻是否停留在当前的感知信道集还是随机地选择其他的感知信道集。适应频谱感知策略可以使得被选择的将要进行频谱感知的频谱更倾向于可利用的状态。2.NazaninRastegardoost等人在2015年的《IEEEWCNC》上发表的文章“OnChannelSelectionSchemesforSpectrumSensinginCognitiveRadioNetworks”中提出一种基于评估信道可用性概率的感知频段选择方法。在此方法中,信道的可用性概率由之前感知到的此信道的可利用次数及被选择为感知信道的次数的比值来衡量。非授权用户根据信道的可用性概率来选择感知信道集合。3.LingcenWu等人在2012年的《IEEEGlobecom》上发表的文章“ARollout-basedJointSpectrumSensingandAccessPolicyforCognitiveRadioNetworkswithHardwareLimitations”中将频谱感知信道选择问题建立为一个部分可观察马尔科夫决策过程,并且提出了两种启发式的解决方法来获得近似的累计收益值。非授权用户基于获得的累计收益值,计算近似的频谱感知行为,即对频谱进行感知或者不对频谱进行感知。4.LincenWu等人在2012年的《IEEEWCNC》上发表的文章“APOMDP-basedOptimalSpectrumSensingAccessSchemeforCognitiveRadioNetworkswithHardwareLimitation”中同样将频谱感知信道选择问题建立为一个部分可观察马尔科夫决策过程。在此文中,为了获得部分可观察马尔科夫决策策略的回报函数从而选择最优的感知策略,理论演义方法被用于评估信道切换概率。在部分可观察马尔科夫决策策略下,此文提出了最佳的感知策略来最小化信道切换的次数。5.LifengLai等人在2011年的《IEEETransactionsonMobileComputing》上发表的文章“CognitiveMediumAccess:Exploration,Exploitation,andCompetition”将感知频谱选择问题建立成了赌博机模型,并且分析了不同场景下的感知信道选择问题。主要的场景包括:单非授权用户单感知信道,单非授权用户多感知信道,多非授权用户单信道以及多非授权用户多信道。在第一个场景下,通过最大化期望吞吐量来选择感知信道。在第二个场景下,此文提出了一种低复杂度顺序优化的感知信道选择方法。在第三个场景下,在选择感知信道的同时,非授权用户之间的竞争同样被充分考虑。在第四个场景下,此文提出了一个优化的低复杂度的频谱感知信道决策算法。在总结这些研究的基础上,可以看出当前动态频谱接入系统中最佳感知信道选择方法的设计中存在以下主要问题:1.很多文章假设非授权用户在同一时隙只可以感知一个非授权信道。然而,在真实认知无线电网络中,随着认知设备的发展,非授权用户在同一时隙可以感知多个授权信道。2.大部分文章都认为非授权用户在进行频谱感知后便可获得频谱的真实状态。然后根据频谱感知结果决定接下来将要感知的信道。然而,频谱感知阶段感知到的频谱状态不一定完全与真实的频谱状态相同。频谱感知过程中存在频谱感知错误问题。3.大部分文章中的感知信道选择方法都无法获得全局最优性能。因为大部分文章中的感知信道选择算法只专注于某一个授权频段的性能,并没有综合考虑所有的可感知的频段。
技术实现思路
技术问题:本专利技术设计出一种基于模糊Q学习方法的最佳感知信道选择方法,该方法中非授权用户通过学习方法在感知信道选择过程中不断摸索,以获得最佳的感知信道集。该方法包括两层学习过程:最佳感知信道选择学习过程以及信道状态学习过程。最佳感知信道选择过程选择将要进本文档来自技高网
...

【技术保护点】
1.一种动态频谱接入系统中最佳感知信道选择方法,其特征在于包括如下步骤:(1)、最佳感知信道学习过程非授权用户根据信道的状态信息在授权频段中选择部分最佳频谱感知信道集进行信道感知;最佳感知信道学习过程中的奖赏由信道感知结果即信道是否空闲决定;非授权用户根据其选择的频谱感知信道集及其对应的奖赏选择下一时刻将要感知的信道集,通过不断地从频谱感知信道集选择及其获得的奖赏中对动态频谱接入系统进行学习,最终非授权用户在不同状态下选择出最佳的感知信道集;(2)、信道状态学习过程非授权用户在最佳感知信道学习过程中所选择的频谱感知信道集作为最佳感知信道学习过程的输出以及信道状态学习过程的输入;然后,非授权用户在信道状态学习过程中,对在最佳感知信道学习过程选择的频谱感知信道集中的信道状态进行判断,在此过程中,非授权用户通过不断的学习,最终获得信道的真实状态;频谱感知信道集中信道的真实状态作为信道状态学习过程的输出,并且反馈给最佳感知信道学习过程作为信道状态学习过程的输入。

【技术特征摘要】
1.一种动态频谱接入系统中最佳感知信道选择方法,其特征在于包括如下步骤:(1)、最佳感知信道学习过程非授权用户根据信道的状态信息在授权频段中选择部分最佳频谱感知信道集进行信道感知;最佳感知信道学习过程中的奖赏由信道感知结果即信道是否空闲决定;非授权用户根据其选择的频谱感知信道集及其对应的奖赏选择下一时刻将要感知的信道集,通过不断地从频谱感知信道集选择及其获得的奖赏中对动态频谱接入系统进行学习,最终非授权用户在不同状态下选择出最佳的感知信道集;(2)、信道状态学习过程非授权用户在最佳感知信道学习过程中所选择的频谱感知信道集作为最佳感知信道学习过程的输出以及信道状态学习过程的输入;然后,非授权用户在信道状态学习过程中,对在最佳感知信道学习过程选择的频谱感知信道集中的信道状态进行判断,在此过程中,非授权用户通过不断的学习,最终获得信道的真实状态;频谱感知信道集中信道的真实状态作为信道状态学习过程的输出,并且反馈给最佳感知信道学习过程作为信道状态学习过程的输入。2.根据权利要求1所述的动态频谱接入系统中最佳感知信道选择方法,其特征在于所述步骤(1)中,在动态频谱接入系统中包含个N个授权频段,表示为N={1,2,…,j,…,N};非授权用户能够在任意给定的时间同时感知NS个授权频段,NS<N。3.根据权利要求1所述的动态频谱接入系统中最佳感知信道选择方法,其特征在于所述步骤(1)中,非授权用户最佳感知信道学习过程包括如下元素:状态,动作及奖赏;所述状态是连续的,用感知信道的空闲概率来表征,即为信道j为空闲状态的概率;所述动作为选择其为感知信道或者不选择其为感知信道,即At={A1,A2,…,Aj,…AN},其中,Aj=[0,1],Aj=0表示信道j未被选为感知信道;Aj=1表示信道j被选为感知信道;所述奖赏表示为Rt,为其选择的感知信道集中空闲信道数量的总和。4.根据权利要求1所述的动态频谱接入系统中最佳感知信道选择方法,其特征在于所述步骤(1)中对动态频谱接入系统进行学习的具体步骤如下:(a)初始化所有规则及动作所对应的所有q值q(Li,Ai),其中,Li为信道状态在第i个规则中的模糊标签,在最佳感知信道学习过程中包括三种规则,即L={L1,L2,L3};其中,Li为最佳感知信道选择方法中的第i个规则,i=1,2,...n,Ai...

【专利技术属性】
技术研发人员:韩光洁李傲寒
申请(专利权)人:河海大学常州校区
类型:发明
国别省市:江苏,32

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1