随着互联网技术的发展,各种新兴的创新型应用不断涌现,爆炸式增长的不同类型的各种信息对数据存储提出新的要求。由于网络应用类型的丰富性,其所产生的文件类型和文件数量都远远超过了传统的通用文件系统所能支持的范围。为了应对不断发展的网络应用所提出的存储需求,面向互联网的存储系统需要具有如下几个特点：首先是要能够处理海量文件；其次要能够支持多种类型的文件的存储,如从几KB的文本文件到几GB的视频文件；然后要具有极高的性能,能够支持大量的并发访问。针对以上这些问题,本文设计和实现了一种面向互联网环境的,支持海量数据的,对多种类型文件提供融合存储的分布式文件系统——FDFS (Fusion Distributed File System)。它借鉴了已有的分布式文件系统的设计经验,打破了常规的分布式文件系统只能存储海量小文件或者只设计用于存储大数据集文件的壁垒,将海量的不同规模、不同类型的文件存储在同一个系统中,大大提高了物理空间的利用率、降低了服务器集群管理的复杂度、同时为全局范围内的负载均衡和存储空间分配提供了更加精确的支持。本文着重阐述了FDFS系统的体系架构设计以及系统设计中核心问题的实现策略。本系统采用了Master/Slave架构模式,使用中心节点——NameServer和MetaServer,分别管理系统的存储空间和目录空间,用户数据则分布在大量的存储节点DataServer上,并且通过FDFS客户端向用户提供访问系统的接口。FDFS中的物理空间以“块(Block)”为单位进行管理,系统会自动地将多个小文件合并到一个Block中,并且将大文件自动地拆分为多个Block。另外,FDFS还为用户提供了目录空间以支持大文件的管理。