基于强化学习的网络功能虚拟化效能优化研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:king_hxr
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
网络功能虚拟化将传统基于硬件的网络功能以软件的形式部署在通用服务器上,提升了网络服务的开放性、弹性与效率。为了快速灵活地提供多样性的网络服务,通常以一个或多个虚拟化网络功能进行组合形成服务,并部署在异构环境上。然而,网络环境中的设备在计算能力、存储资源和分布方式等方面都具有较大的差异性,应该使用自适应方式相应地进行管理。传统的基于模型的效能管理方法由于某些假设或先决条件的参与,在实际应用中受到限制。因此,设计一种无需任何先验知识、不依赖数学模型的优化方法,是构建异构环境下高效网络服务的关键挑战。针对不同网络服务的质量需求和网络功能的组合语义,分别对基于无序网络功能的服务和有序网络功能的服务两方面展开研究和讨论,提升网络服务的效能。针对无序网络功能提供服务的场景,网络功能之间没有前后顺序和数据依赖关系,可以部署在任意的服务器节点上。在运行的过程中,用户请求的时变性和移动性、网络功能实例部署位置的差异性都会对服务效能产生影响。因此,利用Deep Q Network(DQN)来实现用户移动感知的服务迁移管理算法,可以有效地降低服务成本提升服务效能。实验表明,基于DQN的算法可以自动学习用户请求的移动模式,并相应地控制服务器之间的服务迁移,运行时的运营成本比同类算法更低。当服务的网络功能是严格有序时,需要在编排虚拟化网络功能的同时考虑网络流的调度,达到减少成本支出,提高服务质量,最终最大化网络效能的目标。针对该问题,在考虑端到端延迟和各种成本的情况下,设计一种基于Deep Deterministic Policy Gradients(DDPG)的定制化算法以实现智能的虚拟化网络功能编排以及网络流调度。通过大量的实验验证了定制DDPG算法的效能明显优于基于模型的方法和非定制的DDPG算法。
其他文献
近年来,我国未成年人触法案件高发,并逐渐呈现出触法行为低龄化、手段成人化、危害严重化的态势,对我国现行的刑事责任年龄制度提出了新挑战。本文在对推定刑事责任能力制度
【正】 1814年波旁王朝在法国复辟,在法国历史上开始了一个政治反动时期。复辟贵族大肆捕杀过去的革命党人和拿破仑党人,而且掀起对法国大革命的思想围剿,以便为恢复革命前的
<正> 盛夏酷暑,烈日炎炎。当我们驾车行驶或池边垂钓时,就会发现由光亮的路面或水面反射过来的光极其耀眼,弄得人们很不舒服,而这讨厌的反射光还无法回避,既使戴上一副墨镜,
作为人类共同关心的话题,能源的发展速度和程度对人类社会的发展和文明的进步都有很大的影响。由于现如今人类使用的不可再生的化石燃料日渐枯竭且易引起环境污染与温室效应,
目的:研究食管癌患者肿瘤组织和正常食管组织中脆性组氨酸三联体(fragile histidine triad,FHIT)基因的不同表达水平,探讨FHIT基因在食管癌发生发展中的作用,为食管癌的早期
人才是企业得以生存发展的宝贵财富,对人才管理的合理与否,决定了旅游服务行业基石的稳固,更决定了行业内各公司和企业的经济增长,是企业赖以生存发展的核心竞争力之一。论文
随着电子商务在全球范围内的蓬勃发展,网上仲裁已经成为网络经济时代国际商事仲裁发展的必然趋势。然而,制约网上仲裁发展的除了技术方面的因素之外,更主要的是法律上的因素
在人类日常生活中,图像扮演了越来越重要的角色,图像蕴含了丰富的信息,但图像受到各种各样的因素的影响,从而导致其质量不佳。一般情况下,图像会被噪声污染,直接影响到图像的视觉效果,为了解决该问题,图像去噪技术因此得到了成熟的发展,主要目的为既能高效地去除图像噪声,又能有效地保留图像的有用信息,包括图像的纹理和边缘信息等。近些年来,随着信号的稀疏表示理论的不断完善,基于稀疏表示理论的字典学习方法得到了成
利用碳化硅优良的抗氧化性能和抗铁水侵蚀性能,添加不同比例的添加剂,制备出抗压强度≥50 MPa,1μm以下孔容积≥80%,铁水熔蚀指数≤20%,氧化率≤8%,导热系数≥20 W/(m·K)的
新时代小学教育对教师的素质提出了更高要求,把培养"本科+全能型"小学师资作为引领教师教育潮流的战略主攻方向,对课程的设置进行改革,注重对在校师范生综合实践能力的培养,