云存储系统资源管理关键技术研究

被引量 : 4次 | 上传用户:qiuyu19900318
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
云存储利用集群应用、网格技术、分布式文件系统等技术,将网络中海量异构存储设备通过应用软件和网络整合起来协同工作,共同对外提供数据存储和访问功能,其核心是数据存储和管理。云存储服务的兴起意味着云中数据占用空间及带宽越来越大,数据也从简单的处理对象开始转变成为了一种基础性资源,这使得资源安全风险也随之增大,为此,要求快速备份和恢复的时间点越来越多,造成了管理数据的成本及开销巨大。云存储系统中数据资源的安全存储、网络传输和高效利用已经成为了当前研究的核心问题。本文以提高数据资源管理效能为目标,将基于重复数据删除的数据精简技术、基于网络流量自回归特性的网络带宽利用率改进策略、基于离散动力学的敏感数据保护方法相结合,提出了一套基于云存储系统的数据资源管理模型架构,具有重要的理论意义和应用价值。本文的贡献和创新工作如下:(1)针对数据查重过程中面临的磁盘瓶颈问题,提出了一种优化的重复数据删除方案Simdedup,从相似度较高的数据对象会包含较多的重复数据的角度出发,构建数据块指纹的分级索引,并基于相似数据检测技术进行数据块指纹的查重操作。实验结果表明,该方案能够准确地找出相似数据对象并构建查重索引,提高了重复数据删除的性能。(2)针对去重过程生成的元数据冗余问题,提出了一种基于压缩近邻的查重元数据去冗算法Dedup2,算法基于查重元数据的一致子集,消除相似度较高的元数据,以获得较小查重子集。实验结果表明,Dedup2在保持相近的重复数据删除比的基础上,能够将查重元数据压缩到原来的50%以下,进一步降低了存储资源开销。(3)针对网络重复数据传输造成的网络带宽利用率低下问题,提出了一种基于网络流量自回归技术的网络数据去重算法ARTRE,将待传输数据分割成多个传输单元,建立网络当前运行状况模型,通过设计基于预测网络可用带宽的动态自组织调整传输策略,提高网络带宽利用率。实验结果表明,在10MB/s的带宽条件下,传输吞吐量是传统的采用重复数据删除方法的7倍,该策略能够充分利用网络带宽以实现更高的数据传输效率,有较强的网络适应性。(4)针对云存储环境下的数据安全问题,提出了一种基于离散动力学的数据隐私保护算法EPPA,利用混沌映射加密和三维空间拆分置乱,能够有效地保护云存储系统中的用户敏感数据信息不会泄露给攻击者和云系统管理人员,从而保障数据机密性。EPPA将数据在三维空间中进行映射、置乱、拆分,利用混沌映射的初值敏感性和三维数据结构恢复的复杂度来保证数据的机密性。安全分析和实验结果表明,EPPA能够保证数据的机密性,且加密时间开销比传统的AES算法降低了85%。
其他文献
南通作为纺织之乡,服装出口作为南通的一大出口经济来源一直被政府所重视。虽然世界贸易组织出台了全面取消纺织品的配额的规定,但是,这并不代表全球纺织品服装的贸易进入了
罗兰大学孔子学院成立于2006年12月7日,是匈牙利第一所孔子学院。罗兰大学孔子学院不仅在布达佩斯进行汉语教学和文化推广活动,而且还辐射到匈牙利9个城市,在35个大、中、小
随着微机保护技术的发展,保护装置的性能得到了较大程度的提高,但是微机保护装置在直观性和可维护性等方面与传统的保护装置存在差距。微机保护装置数据计算过程较为复杂,并
自上世纪90年代,有学者及体能训练机构(美国体能协会)对最大力量预测公式及换算进行研究,然而,多数研究集中在动态条件下通过次最大强度极限重复次数对某些动作(如卧推、下蹲
随着全球社会形势和经济形势的迅速发展变化,人力资源管理的重要性日益凸显。国税部门作为公共管理部门的重要组成部门,承担着为国聚财、为民收税的光荣使命,把握着调节社会经济
<正>问:色浆容易干结皮是什么原因?答:涂料色浆容易结皮是因为,涂料色浆表面游离水分丢失,颜料与助剂黏结在一起,产生结皮,跟涂料色浆的保湿效果和正确储存都有一定关系。色
目的:在导师完善的“尺肤诊断法”的指导下选取郄门穴,观察并明确针刺该穴位治疗慢性浅表性胃炎的临床疗效,为临床提供一个更为简单、危险性低、高效的治疗方案。通过红外热像仪
随着计算机视觉的广泛应用,视频监控系统在生活中日益普及。但在雾天等复杂场景条件下,室外场景能见度降低,基于CCD等设备的视频监控系统无法获取到清晰的图像,这给视频监控
随着移动互联网时代的到来,在智能移动终端上在线或下载观看视频资源已经成为一种大众化的智能移动终端内容消费行为。用户需求的丰富,使已有的无线网络基础设施承受着巨大的
人力资源规划是企业进行人力资源管理的基础性工作之一,人力资源规划将企业总的战略发展目标转化为对人力资源的需求,从长远发展的角度对人力资源需求进行预测、分析并制定出