网格环境下的高性能数据传输与管理

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:w253602739
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在日新月异的计算机和通讯设备的发展中,网格这一新兴的基础设施带来了新一片的网络繁荣。它试图联通广域网上的资源,希望在现有技术上建立更高层次的共享。其中数据传输及管理不仅在处理海量数据的数据网格占据着不可撼动的位置,在计算网格、服务网格等领域也有着至关重要的地位,数据高效、可靠、方便的移动和复制关系到整个系统的效率。 另一方面,网格再也不是学术或科学实验里的高性能计算,而是一种面向服务的体系结构,它要解决如何在因特网上提供按需的、有状态的服务的问题,允许用户通过网格技术来共享计算资源、存储资源和其它资源。这就需要提供更直观方便的架构和技术。 结合以上背景,经过对现有几种网络传输协议或机制的比较分析后,本文指出自适应数据传输的必要性,提出了协议自适应的高性能数据传输和管理的解决方案,包括数据传输接口、中间件、软件;数据副本管理;网格数据传输门户等,并分析比较了传输性能。 跨协议的传输接口把不同的协议抽象成统一的协议无关的接口,提供给上层应用方便的数据传输和事件监控等功能。还综合各种因素进行考虑,对传输协议在不同网络状况下可能存在的不足和传输应用的不同场景进行研究,从TCP缓冲区、并行流数目、连接池、多文件传输等多方面尝试改进数据传输的性能。 针对带状传输存在的缺陷,我们建立起数据副本管理体系,使用较好的副本管理和定位选择算法,然后提出并建模分析多副本传输,比较了多种负载平衡策略。多副本传输能很好地适合网格环境的动态性和资源分布性,有效提高网络带宽。 通过高性能数据传输接口我们不仅实现了图形界面传输软件:它是一个跨平台、跨协议的智能数据传输软件,还实现了符合WSRF规范的可靠数据传输中间件——PAFT服务,它支持跨协议的数据传输和简单文件操作,以及数据传输管理网格门户,提供Web方式的访问传输控制和管理。 本文所有的设计、实现和结果在以IBM P690高性能计算机为中心的网格计算实验室中运行并测试通过。
其他文献
  本文对嵌入式浏览器的开发进行了分析和设计,分别就嵌入式系统以及嵌入式浏览器的总体结构进行了详细的介绍,对嵌入式平台下的各种GUI图形库进行了阐述,并选择了FLTK这一GUI
随着宽带网络技术和多媒体技术的飞速发展,人们对计算机网络提出了以多媒体通信为主的集成服务要求。而互连网是为非实时性数据传输设计的,采用TCP/IP协议的主要目的是为了优化
随着信息化社会的来临,北京的网民对互联网业务的需求量大规模增长。到2005年2月,中国网通(集团)有限公司北京市分公司(以下简称北京网通)已有6.6万宽带以太网用户,112万ADSL用
本文对分布式信息资源管理系统的实现进行了研究。文章首先系统地研究了目前对于“信息孤岛”问题的解决方法,然后分析与综合了各种数据库技术、数据表示方法和通信手段,提出了
随着经济全球化的趋势不断加强,跨企业项目管理组织作为提升企业竞争能力的全新企业组织模式,成为新一代企业的发展热点。如何在这种庞大复杂的临时性跨企业组织结构中为大型项
多用户协同计算概念的提出将从根本上改变人们对“计算”的看法,因为它提供的是与以往根本不同的计算方式。多用户协同计算的一个具体实现就是网格系统。网格概念的核心就是
NHDB是本课题组研制的一个关系数据库管理系统,查询语言是SQL的一个子集。基于NHDB实现了一个移动数据库-Mobile NHDB的原型系统。Mobile NHDB在局域网上模拟了移动数据库的
伴随着万维网的发展,越来越多的人开始以网络进行生活、工作和学习.信息检索已经构成网络的一个不可或缺的因素.在进行信息检索时,用户希望能够检索出所有感兴趣的信息,这就
由于互联网技术的飞速发展以及经济全球化程度的不断提高,企业对信息进行网络化管理的需求日益强烈,大部分企业管理软件已经开始全面从桌面应用走向网络应用,系统构架从C/S结构
信息技术已成为当今最先进、最活跃的生产要素,它的迅猛发展,特别是互联网技术的普及应用,使电子政务的发展成为当今信息化最重要的领域之一。政府业务过程的自动化是电子政务系