基于云计算的并行调度的研究

来源 :中国石油大学(华东) | 被引量 : 0次 | 上传用户:aiming4636j
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当今社会伴随计算机技术的飞速发展与互联网技术的广泛应用,云计算的商业化及虚拟化越来越成熟,同时也有越来越多的计算服务依托于云计算来实现。目前在互联网中,计算机资源成爆炸式增长。为了满足大规模计算能力和海量数据存储与处理的需求,我们依靠云计算来建立能支持资源分布式存储和集成并发计算的环境,这是一种有效的解决方案。   本文结合大规模的石油地震勘探数据在处理过程中对高性能计算的需求,研究云计算环境下处理地震资料数据的并行调度问题。研究目的是提高数据处理的效率,充分高效的利用云计算资源,使任务透明、方便、高效的进行提交,并且使其快速匹配、高效执行在最优的计算资源中。由于地震资料数据天然的数据可分性,数据之间联系较少,相对来讲一个数据文件并发执行的效率也会越高。所以将大作业文件放到能够恰好满足任务计算能力需求的资源结点上执行,能够最大限度的充分利用已有的计算资源。这也要求必须根据任务和资源属性作业进行划分。精确求解数据划分的最优化过程是较困难的,本文采用了改进的模糊聚类划分算法以作业与资源节点属性的匹配程度为基准进行分类划分求解。在划分完成后通过引入基于改进的贝叶斯分类调度算法将资源节点依据其实时负载情况与队列中的作业进行快速的匹配。经过实验验证,此方案具有较高的执行效率。
其他文献
传统考试中主要有:教师出题、组卷,教师判卷和分数统计等工作,考生在考试中受时间和地点等诸多因素限制,而利用网络和数据库技术,在线考试已经逐渐成为一种发展趋势,它可以使
电气专业人士的日常工作繁琐而复杂,经常需要使用不同的仪器,而这些仪器通常都具有体积较大、携带不便、无自动数据处理能力等缺点。同时,他们也常常需要查询大量电学相关资
随着IT行业的兴盛和互联网技术的飞速发展,信息资源也在迅速、海量地增长。由于其中大部分的信息资源都以异构、动态的Web文本形式存在,因此如何在这巨大的数据海洋中快捷方
复杂网络研究作为一个新兴的学科方向,极大地吸引了来自不同学科研究人员的广泛关注,已成为学术界研究的一个热点。人们生活在一个充满着各种各样的复杂网络的世界中,这也使得研
Wine是一款优秀的开源软件,通过在Linux用户空间仿真Windows操作系统环境,使得Windows应用程序能够直接在Linux操作系统上安装和使用。Wine弥补了Linux操作系统上应用软件的
随着经济的快速发展,我国汽车保有量和汽车产量急剧增加,这种急剧扩张给汽车产品的品质带来巨大的挑战,因而车辆可靠性评估软件平台逐渐为国内外研究者所关注。车辆可靠性评
在无线传感器网络众多应用领域中,节点的位置信息是大多数应用的前提和基础,获得节点的位置信息是非常有必要的。因此,研究定位技术对整个传感器网络的发展乃至人类的发展都
当今,全世界范围内互联网业务的飞速发展,为人们带来了巨大的便利和无限的商机。云计算、移动互联网平台、无线通信系统的广泛应用正一点一点改变着我们的生活。而网络安全问
旅游作为一种缓解生活及工作压力的休闲方式,已经成为人们生活中必不可少的一部分。生活在信息时代的人们,在为旅游做准备时,会通过网络搜索相关信息,但是网络信息超载问题使得人
互联网的快速发展使得网络上的数据量急速增加,几乎每一个被浏览的网页中都包含了信息丰富的HTML表格,称之为网络表格。用户通过搜索引擎查询并获取有用信息时,网络表格相对