面向智能电网云存储的容错存储技术研究

来源 :华北电力大学 | 被引量 : 0次 | 上传用户:qqliveqq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能电网建设的不断发展,系统中采集点越来越多。一个中等规模地区的采集量可以达到2万至10万条记录,而一个大型地区未来面临50万至100万条记录的数据采集规模,一个地区一年的数据存储规模将从目前的GB级扩大到TB级,智能电网要求对这些海量数据进行可靠存储。云存储系统为智能电网海量数据提出了解决方案,本文提出了面向智能电网的云存储系统,并完成一下几个方面的工作。(1)本文分析了智能电网面临的问题,研究了云存储系统结构,在面向智能电网云存储系统中,设计了基于CRS容错存储算法,提出将量测系统采集过来的数据,经过CIM建模,统一存储到云存储系统中,运用CRS容错能力强,空间利用率高,可扩展性好等优点,提高云存储系统的空间利用率和数据可靠性。(2)研究分析了CRS编译码过程,将CRS编码过程中有限域)2(wGF上的乘法操作转化为二进制矩阵的异或操作,简化了操作步骤,提出了HGA算法,优化计算路径,提高编码性能。同时利用云存储系统中的MapReduce编程框架对CRS编译码经行并行化操作,提高CRS编译码效率,满足海量信息并行化存储的需求。(3)提出了基于多因素数据放置算法,从节点的可信度、网络存储距离以及相对负载三个因素综合决定数据放置节点,因为智能电网存储数据时云存储系统对数据节点可靠性有一定的可信度要求,节点的存储距离影响数据的存储和读取,同时负载均衡也是判断整个集群性能的重要指标,使云存储系统具有较高的容错性和较小的访问延迟,降低同一数据对象多个数据块同时失效的概率。(4)实现了面向智能电网云存储系统的容错存储,针对电力系统的数据类型,利用实验室的设备,对数据存储的存储效率进行了测试,同时验证了改进的CRS编码性能,同时对提出的放置算法进行了测试。
其他文献
目前,科学计算可视化是图形学的一个热点研究方向。切剖功能作为科学计算可视化的核心和关键功能之一广泛地应用于自然科学和工程的各个方面。矢量图形由于适合表达各种物体
无线传感器网络工作在一个开放、合作和高度任意的环境中,具有节点间链接脆弱、节点完全暴露在物理环境中、拓扑结构动态变化、身份认证缺乏等特性,使得无线传感器网络存在许
文本分类和聚类是现代搜索引擎设计的重要计算,也是在数据处理、数据挖掘等应用中的关键计算。因此对文本分类和聚类技术研究不仅具有重要的理论意义,而且具有广阔的应用领域。
本文的主要工作如下: 1) 综合主机检测器和网络检测器的分布式入侵检测系统体系结构的设计,同时分析来自主机的审计记录,系统日志以及网络原始数据流,更加全面地检测系统的各
随着云计算和物联网在各行各业掀起改革浪潮的不断推进,安防监控系统正在走向新的发展方向,集中管理、无人监控成为时代所需。监控系统的通信模块以及与系统远程设备之间的安全
随着电信通信行业的快速发展,光纤通信网络的资源数量和种类不断增加,光纤接续关系日益复杂。各电信运营商对安全、高效的管理各类资源,从而给用户提供稳定的端到端服务提出了更
不论是从环境保护、节能减排、可持续发展、经济发展等各方面的需求出发,还是从电网自身发展的角度看,智能电网都是传统电网未来发展的一种必然趋势。随着智能调度、智能输变
近年来,网络攻击呈大幅上升趋势,冲击波、震荡波等蠕虫给网络安全带来了很大的挑战。传统的防火墙技术如包过滤防火墙、状态检测防火墙等,都缺乏应对这些新的攻击的能力。作
随着Internet及其应用的迅速发展,网络规模日益增大,网络应用日益复杂,由于互联网是一个高度复杂的非线性系统,为了实现可靠的数据传输及合理的网络资源分配,就需要深刻了解
借助计算机来进行医学图像处理和分析,是图像处理技术结合医学影像特点的重要应用。计算机辅助诊断系统在医学研究和临床诊断中,尤其是缺少专家的情况下具有十分重要的意义。