【摘 要】
:
随着云计算、大数据、移动互联网的快速发展,数据量正在急速增加,存储系统面临的挑战也愈发艰巨。基于机械硬盘的传统分布式存储系统,难以满足信息存储的需求。高性能固态盘
论文部分内容阅读
随着云计算、大数据、移动互联网的快速发展,数据量正在急速增加,存储系统面临的挑战也愈发艰巨。基于机械硬盘的传统分布式存储系统,难以满足信息存储的需求。高性能固态盘的引入,有效缓解了这一现状。随着其单位存储价格的持续下降,全固态盘组成的存储系统成为可能。但是,经典的副本保护策略,会增加系统存储开销,减少固态盘使用寿命,从而影响系统整体的可靠性。针对分布式环境下副本策略冗余数据过多的问题,引入纠删码保护策略。基于文件大小设计了副本和纠删码混合容错方案,小文件采用副本模式存储,大文件则直接用纠删码模式存储,解决小文件随机写带来的磨损问题。部分加速磨损策略,实时统计集群中所有固态盘的使用情况,合理确定校验数据的位置。在前期维持所有固态盘的磨损均衡,剩余寿命为20%时,将校验分布在固定的一组节点中加速其磨损,从而降低多个节点同时出错的可能性,提高系统可靠性。基于条带的并行编码策略,利用多个节点的计算及远程数据处理能力,大大提高编码的速度。数据转码过程,定期扫描副本区的数据,将访问少的数据转换为纠删码模式存储。为此优化了小文件副本放置策略,以便将多个小文件的主副本组合成新的条带,并计算其校验,进一步减少对固态盘写入。使用iozone测试系统的大文件读写性能,filebench模拟各种负载对存储系统的访问,测试系统写入数据量的变化及对应的带宽。测试结果表明,在多种负载下,系统均能在前期维持节点的写均衡,在后期加速部分节点的磨损,符合部分加速磨损策略的预期。混合存储及部分加速磨损策略增加了计算开销,但并行编码策略的引入,仍为写性能带来11.1%~21.5%的提升。与副本模式相比,纠删码写性能提升了3.5%~29.5%,验证了在线编码的可行性。小文件副本放置策略也可以有效减少数据转码带来的写放大,使其增幅仅有5.6%~14.8%。
其他文献
长期以来,由于带式传输机具有经济、可靠、线路灵活、能耗低等优点,在许多工农业生产环节成为了散状物料运输、装卸的主要设备。同时带式输送机输送散状物料流量的计量数据对于生产企业的信息化改造、规范化管理、自动化控制,以及提高产品质量具有重要意义,因此如何提高散状物料流量动态计量的准确性和智能化成为近年来的研究热点。为满足散状物料快速、准确、稳定计量的需求,本文基于Xilinx公司的Zynq-7000系列
云存储是在分布式文件系统、网格计算、集群应用的基础上,将网络中大量类型各异的存储设备通过应用软件整合在一起,来提供数据存储服务。为了增强系统的可靠性与容错性,云存
铁路运输作为我国交通运输的重要组成部分,在大众日常出行和国家经济发展中扮演着重要的角色。同时,在目前国家提倡的环境友好型社会建设中,铁路运输也担负着非常大的重任。
森林资源是人类赖以生存的发展的物质基础,它不仅能够为发展和生产提供各种各样的物质原材料,同时对整个生态环境的稳定和健康发展发挥着巨大的作用,准确测算林木生长数据具
目的:应用扫频源光相干断层扫描(Swept source optical coherence tomography,SS-OCT)及光相干断层扫描血管成像(Optical coherence tomography angiography,OCTA)观察妊娠期高血压综合征(Pregnancy-induced hypertension syndrome,PIH)患者视网膜脉络膜结构及黄斑区微血管形态的
不同规模的数据中心已经得到广泛应用,云服务提供商在不同的数据中心间同步数据,并且提供了不同功能的在线业务。由此产生的海量数据在数据中心间网络中传输,部分关键链路在
对于学生和社会的发展来说,社会责任感无比重要。在学生学习成长过程中要培养社会责任感,正确引导其认识社会责任的重要性,明白自身所要担负的社会责任感并主动承担。同时在此基础上,让学生明白如何将社会责任感付诸于行动,并在实践当中更加关注社会利益,从而提高自身素质,积极参与到社会主义建设当中。本文采用通过文献整理及教师访谈,找出现在高中生社会责任感教育中存在的问题;运用适当的教育方法,结合生物这门学科的自
世界哲学大会由世界科学与哲学团体联合会主办,旨在促进世界各国哲学界的联系和哲学教育。每届世界哲学大会召开前,都有为期一周左右的预备专家研讨会。来自世界各地的专家,
计算机系统设计之初是为了辅助计算,并未考虑系统安全问题。但是随着计算智能化和数据资源共享的发展,计算机已逐渐成为人们知识和财富的载体,网络则为资源共享提供了强大的支撑。然而,当前计算机及网络系统的安全防护措施并不能满足资源承载和共享的安全需要。越来越多的计算机及网络系统漏洞成为攻击利用对象,对信息安全造成了严重威胁。国产主动免疫可信计算创新性地提出了双体系结构即计算+防御,该结构的提出从根本上改变
目的:为探讨猪红细胞免疫黏附受体CR1-like(ECR1-like)的多态性特点,本实验从个体水平上分析ECR1-like的分子量、膜表达数量及免疫黏附水平等方面是否具有个体差异,以期探讨