随着数据存储的高速增长,传统的数据库已经无法满足人们处理大规模数据的需求,有关海量数据的处理与存储成为当前的研究热点。Hadoop文件系统HDFS成为研究云存储应用的参考模型。但现有的HDFS架构对小文件的存储支持不足,而且默认的副本放置策略会影响存储性能。本文深入研究了HDFS的副本放置策略以及小文件存储问题。本文从课题的研究背景和意义出发,分析了云存储系统及联动系统的研究现状,明确了云存储对于网络安全设备联动系统日志文件存储的必要性和现实意义。主要解决了以下两个问题:第一,改进了HDFS中的默认副本放置策略,采用基于信息熵的TOPSIS多属性决策方法,为数据块的副本选择数据节点,利用具体实例对改进方案进行了验证,实验表明改进方案提高了系统的整体性能;第二,优化了小文件存储方案,对整个优化方案进行了设计,包括数据预存储节点的设计,小文件合并算法的设计,小文件索引结构的设计,小文件合并过程的设计,并通过实验进行了验证,实验表明在存储海量小文件时,小文件的存储优化方案提高了整个系统的存储性能。本文将改进的方案应用到网络安全设备联动系统中,设计并实现了基于网络安全设备联动日志的云存储系统。对系统的总体构架及设计思路进行了概述。阐述了各功能模块的设计理念及主要功能实现并对系统运行结果进行了分析评价。