集群环境下的文件调度优化研究

被引量 : 1次 | 上传用户:dygaalove4390
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
集群就是一组计算机或者工作站以特定的方式连结起来,它们作为一个整体向用户提供一组网络资源和计算资源。通过集群系统,可以获得接近于超级并行计算机的计算能力和处理能力。随着分布式技术和并行计算的快速发展,用户对集群系统的需求日益增长。集群系统提供强大计算能力的同时,面对结构复杂、节点繁多的实际状况,其系统管理是一个值得深入研究的领域。本文研究的主要内容为日本富士通公司的超级集群系统设计实现的一个作业文件传输调度器。调度器主要完成作业运行所需文件传输调度优化任务,以保证系统稳定、资源负载平衡、作业按时执行的情况下,且使得作业依赖文件传输的时间最短,为作业高效执行提供强大的支撑。论文通过对当前集群环境下文件传输方案的研究和分析,并结合实际的集群架构,提出了文件分时间段传输优化算法,并设计实现了集群系统模拟实验。模拟系统包含三大模块,即主控制模块、通信接口模块和文件传输调度器模块。在主控制模块中,实现了客户端管理、节点的管理、用户提交作业的管理以及对集群系统中作业的监控和调度功能;在接口模块中,主要实现了系统控制、共享内存管理以及实现两个模块之间的数据通信功能;在文件分段传输调度模块中,实现了作业依赖文件分段传输的管理和调度。调度算法在采用经典调度算法的同时,实时地根据作业请求信息,引入时间片机制,通过各个节点之间占用时间片的时间值的比较,得出可以最早时间内完成传输任务的调度方案。另外,通过编程还实现了进程间的数据通信,利用互斥锁机制保障了进程间数据同步与安全性。最后通过一些典型的用例测试,表明计算方法正确,调度结果符合预期目标,实现了对传输时间最短的优化目标,为作业高效执行提供了良好的决策支持。
其他文献
摘要:在新一代飞机中,大量采用整体结构件,整体结构件具有尺寸大、壁薄、加工精度要求高等特点,加工变形是其制造中存在的突出问题之一,而初始残余应力是引起加工变形的主要因
随着当今航空航天、交通运输以及3C产品的不断发展,对合金材料轻量化及减振降噪性能的要求逐渐提高,镁合金以其密度小,阻尼性能好的特点成为最有前景的合金材料之一。然而镁合金
无论是世界还是中国,汽车产业已经进入了飞速发展的阶段,中国已经成为全球第二大汽车国,无论是汽车安全的要求还是节能的需求,越来越多的汽车轻量化的呼声显得越来越迫切,从而导致
目的探讨养阴清肺汤治疗老年慢性阻塞性肺疾病的临床疗效。方法 106例老年慢性阻塞性肺疾病患者,随机分为观察组和对照组,各53例。对照组患者予以常规西医治疗,观察组患者在
高速铣削加工技术是制造业近几年来快速发展的一种技术,被广泛应用于航空航天、汽车、模具、能源、轨道交通等众多领域,是今后金属铣削的主要发展方向。在许多模具和复杂自由
  按摩机器人在按摩时,由于人体的移动,需要实时对穴位定位和跟踪。本文结合人体背部特征和运动特点,提出了基于模板匹配的按摩机器人穴位定位和跟踪的算法。首先在人体背部预
党的十九大报告指出没有文化自信,没有文化的繁荣兴盛,就没有中华民族伟大复兴。文化产业集聚效应与反射效应是文化强国建设进程中的重要课题。本文选取文化产业10个行业作为
<正>关于妊娠母猪的增重与哺乳母猪的失重问题,素有"产前—身膘,产后—窝猪"之说。说白了,无非是说母猪妊娠期体况好,哺乳期仔猪的断奶窝重就高。初产母猪妊娠期一般要求体增
目的:探讨社区居委会工作者寻求专业心理帮助态度,为促进社区居委会工作者的求助行为,更好的利用精神卫生服务,保持良好的心理健康提供依据。方法:采用寻求专业性心理求助态度
背景:人乳头瘤病毒6b型(Human papillomavirus type6b, HPV6b)属低危型HPV,其感染引起的皮肤和肛门外生殖器粘膜良性疣状增生性病变是临床常见病和多发病。宿主局部免疫抑制和