基于YARN的GPU集群系统研究

被引量 : 7次 | 上传用户:liongliong499
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在CPU单核性能逐渐遇到技术瓶颈的今天,GPU作为一种高度并行化的流式处理器,在许多应用上的计算能力已经大幅超越CPU。加上其可编程技术的成熟,基于GPU的通用计算已经成为一个热门且重要的研究领域。与CPU相类似地,单个GPU的性能还难以完全满足计算密集型应用的强大计算力需求,GPU集群化成了必然的趋势。然而,为每一个应用均开发专门的GPU集群系统的代价过大,基于此,本文结合第二代Hadoop分布式系统对基于YARN的GPU集群技术进行了分析与研究。首先,本文通过研究YARN系统的组成结构,分析了其多维资源管理的可行性,并为其进行GPU资源调度提出了相应的解决方案。同时,针对YARN资源调度过程和调度算法实现上的不足,本文结合GPU的相关特性,对相应模块进行了修改与优化,使YARN系统真正具备了高效地调度CPU、内存和GPU三种资源的能力。接着,为了使CUDA程序能够在YARN框架中并行地运行,本文从YARN框架的用户接口出发,设计了具有一定针对性的CUDA应用程序控制器,用于简化CUDA程序迁移至YARN的过程,以达到降低其并行化成本的目的。同时,针对GPU的硬件特性,本文对CUDA应用程序控制器的任务分配策略进行了深入的研究,以提高集群资源利用率,并为开发人员对程序进行优化提供科学性依据。最后,本文通过设计多组实验对系统进行了全方位的测试,并对结果进行了详细的分析。大量的实验数据表明,本文的设计能够在复杂的异构环境下快速地构建高效稳定的和优良可扩展的多维资源弹性计算平台。
其他文献
信息技术的快速发展给社会带来了较大的变化.因此,在医院综合档案的管理过程中,应加大对信息技术的应用力度,实现医院综合档案数字化建设,加大对综合档案的应用力度,进而为医
探讨了消费者对于参业服务业食品安全风险认知的心理表征结果。通过问卷调查方法,对317名天津市普通餐饮消费者进行了餐饮业食品安全的风险认知的表征探析,进行了心理表征结
品牌名称:Bulgari(BVLGARI)中文名称:宝格丽所属国家:意大利创建年代:1884年创建人:Sotirio Bulgari(Sotirios Georgis Boulgaris)品牌属性:奢侈品品牌产品系列:珠宝、钟表、包袋、鞋靴
泡沫陶瓷因具有独特的孔隙结构和优异的耐高温性能广泛用于熔融金属过滤、催化剂载体、生物功能材料和吸声隔音材料等领域。本文针对高温环境中吸声材料的应用需求,采用蛋白质
内皮素1/内皮素受体轴(ET 1/ETR轴)对很多恶性肿瘤的发展有调控作用。我们发现ET 1/ETR轴能显著促进喉癌细胞增殖,但通过何种信号通路引发细胞反应尚不明确。内皮素受体属于G
作为一种民间传统工艺品,剪纸以其工具(剪刀、刻刀、纸)简单、造型淳朴、结构简练、色调单纯明艳以及丰富的寓意象征手法,呈现出独特的艺术语言和艺术魅力。在每册小学美术教
芳香化酶参与哺乳动物中枢神经系统的发育,调节神经内分泌,影响性行为和繁殖功能;并且可以调控非哺乳动物性腺分化,影响多种鱼类的性别分化和性别决定。芳香化酶由芳香化酶基因cy
在筒子纱染色的工业生产中,获取机械臂及纱杆锁扣的相对位置实现机械臂的精确定位和抓取目标是染色过程的关键技术。设计了基于单目视觉的机械臂目标定位及光学测量系统,通过
对基于MSP430G2553单片机的一氧化碳检测报警系统进行了研究,该系统主要由主控制模块,CO电化学传感器,液晶显示以及无线传输模块构成。利用了MSP430单片机和CC1100无线传输的