基于深度强化学习的频谱感知聚合算法研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:wp87825385
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
无线通信技术的高速发展以及无线通信设备的爆炸式增长加剧了人们对频谱资源的需求,然而有限的频谱资源在传统的固定分配策略下并不能得到充分利用,于是致力于通过提高频谱利用率来缓解频谱资源短缺问题的认知无线网络技术应运而生。近年来人工智能领域的强化学习理论研究已获得长足进步,研究者将这一理论应用于认知无线网络领域,在频谱分配以及功率控制问题上取得了巨大突破。本文以深度强化学习为工具,针对认知无线网络中的频谱分配问题做了如下工作:一、多角度说明基于深度强化学习的频谱分配这一课题的科研背景和意义,汇总国内外有关此课题的科研现状。二、概述认知无线网络基本概念及关键技术,包括频谱感知技术与频谱聚合技术,介绍强化学习基础理论以及常见算法。三、研究了单一认知用户场景下的频谱接入问题,综合考虑用户的带宽需求与频谱聚合能力,提出了一套动态频谱感知聚合的解决方案,并采用贪婪策略、强化学习与深度强化学习三种算法实现,从决策准确率、场景鲁棒性以及时间复杂度三个方面比较了三种算法的性能优劣。四、研究了多用户场景下的频谱分配问题,取消用户对频谱资源的固定占用,综合考虑用户的带宽需求与优先级别,使用深度强化学习算法实现了多用户之间的频谱协调使用,解决了多用户强化学习场景下的环境不稳定问题,最后从平均奖励反馈以及各用户的信道质量方面对算法的性能进行了讨论分析。本文将深度强化学习工具应用于频谱分配领域,寻找更加高效灵活的自适应频谱分配方式,在多种场景下取得了一定成果,验证了深度强化学习在频谱分配问题上的可行性。未来的研究方向可以从算法和场景两个角度出发,设计更具适用性的算法以提升性能,建立更具象的场景模型以贴合实际,最终实现高性能高效率的频谱分配。
其他文献
《普通高中历史课程标准(2017年版2020年修订)》从适应时代发展需要的战略高度确立了高中历史教学的发展型理念,它不再拘泥于历史知识的细致传授,而是需要学与教的主体都知晓历史发展之大势,"以大概念为核心,以主题为引领",在真实的历史情境中架构课程内容,主动探寻历史故事背后之灵魂。所谓"大概念",根据奥尔森(Olson)的理解,是指学生在忘记具体的经验和事实之后还能够长久保留的中心概念(ce
期刊
偏大班额制约个性化教学,我们可以在教学中结合不同类别学生的差异拟定教学策略,提高教学质量。本文旨在通过问卷调查发现初中学生地理学习的差异,进行差异分析,为初中地理个性化教学提供策略,促进初中生的地理学习。调查发现男女学生、不同户籍地学生、不同地理成绩层次学生在地理学习上存在显著差异,有统计学意义(如果|Z|>1.96=Z0.05/2,p<0.05则两样本之间有显著性差异)。针对以上差异,进行原因分
从二十世纪中叶至今,光电成像技术一直处于迅速发展中,现如今已经广泛应用于摄影摄像、交通引导、军事对抗和医学影像等各个方面。作为数字成像系统中的核心技术之一,自动聚焦技术的相关研究也越发受到人们重视。早期的相机多是基于人工对焦的方式进行工作,但随着工业技术发展和光学理论知识的完善,这种效率低下的对焦方式很快被自动聚焦技术所取代。当前,基于图像处理的现代自动聚焦系统已经成为生产和应用的主流,系统利用光
随着信息技术上升发展,越来越多的信息逐渐变成数字数据通过网络实现互相传输,在这一过程中,保证数据的安全性就变得越来越重要。密码技术是保证信息安全的核心技术,它可以将信息进行隐藏从而保证信息的机密性。1995年Refregier提出双随机相位加密技术。从这之后,光学加密因为自身加密速度快、编码维度多等优点而快速发展。随着研究者们逐步探索,众多光学加密方法被研究出来,其中,基于计算鬼成像的光学加密系统
近年来,太赫兹散射成像技术因其高速、高效等优势而在生产生活中得到了广泛的应用,如反恐作战、安全检查、医疗检测等。本文设计了三种工作于太赫兹波段的多输入多输出(MIMO)阵列,并分别推导了设计规则,计算了等效误差,同时探究了阵列天线辐射区域内目标位置对等效误差大小的影响。通过对阵列结构的合理化设计,该研究实现了传统散射成像天线系统的大幅简化。基于本文设计的阵列结构,该研究分别进行了后向投影(BP)算
肾脏肿瘤多为恶性肿瘤,是泌尿系统最常见的肿瘤之一,每年新增肾脏肿瘤病例超过40万例,严重危害人们的健康。临床上多采用手术切除的方式,保留肾单位手术成为一种更加常见的治疗方式。保留肾单位手术是指切除所有肾脏肿瘤,尽可能保留患者部分正常肾脏,这就要求尽可能准确的分割出病变位置。传统分割方法中,医生根据病理学知识和相关经验,借助相应的标注软件在CT影像上手动标注肾脏和肾脏肿瘤位置,耗费大量时间和精力。此
服刑人员是社会中重要的一个特殊群体,虽然总人口占比小,但对国家健康快速发展、社会和谐稳定、公民人身财产安全等都有很大的影响,因此针对服刑人员的治理和研究是一项关键紧要的工作。对其进行日常行为监测和危险评估等,有利于提高监管场所的管理效率、保障监管环境安全等。在监狱管理工作中,常规的危险评估主要针对狱内服刑人员的危险性等级、危险类型以及再犯风险等内容进行预测和分类。本文的评估重点是危险性等级。在服刑
随着深度学习的迅猛发展,孪生神经网络占领了目标跟踪领域的半壁江山。孪生神经网络能够进行单样本学习,在图像块匹配领域具有天然的优势,将其应用于目标跟踪能够快速准确地匹配目标,在保证精度的同时简化模型,加快跟踪速度。超声心动图利用超声波独特的物理特性,获取心室、心肌、心内膜及心外膜等心脏组织结构的周期性运动信息,形成心脏组织运动影像,在各类心脏疾病的临床诊治中应用广泛。超声心动图中的散斑不只是噪声,还
随着可穿戴设备的成度的升高,运用可穿戴设备进行行为识别已成为行为识别领域中的研究热点,其在智能安防、病患监护等领域有着重要的应用价值。可穿戴设备体积小、功耗低、佩戴方便、对环境因素要求低、方便部署,非常适用于人体行为识别场景。可穿戴设备到服务器端的数据传输是系统实现的重要环节,目前常见的传输方式有Wi-Fi、蓝牙、4G、远距离无线电(Long Range,LoRa)等,其中蓝牙传输距离近,需要借助
新教科书实施之初,教学中如何理解和运用《学习聚焦》这一子目,显得至关重要。一、理解《学习聚焦》的三大特色新教科书每课3—4个《学习聚焦》,既高度凝练本子目,又彼此贯通,从而构成本课学习内容主旨,凸显高中历史学习的重点和主题。纵观新教科书,此栏目有三个主要特色。1.诠释历史课标内容
期刊