基于hadoop的能耗系统设计与开发

被引量 : 1次 | 上传用户:rambo527
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来随着通信行业和互联网行业的高速发展,人们日益享受到科技发展带来的便捷。与此同时,数据中心的规模也在迅速膨胀,并且数据中心的能耗已经不能忽视,在2012年我国数据中心耗电664.5亿度,已经占到工业总电量的1.8%,并且耗电量依然在高速增长当中。为了合理降低数据中心的能耗数,需有一套系统可以实时获取数据中心的能耗数据,基于采集到的能耗数据,该系统可以进行能耗查询,能耗分析等功能模块。通过实时提供数据中心的能耗信息,该系统可以为数据中心管理人员提供全面的信息支持。基于以上需求本文设计并实现了基于Hadoop平台的能耗系统,本文涉及到的工作主要包括三部分:1.本文设计并实现了基于Hadoop与关系型数据库的混合海量数据存储架构。Hadoop在大数据并行处理方面具有良好的性能,关系型数据库在快速查询方面具有优势,本文结合了两者优点构建了能耗系统的平台框架层。在Hadoop与关系型数据库之间使用Sqoop工具来实现二者的数据导入导出。2.依托于混合海量数据存储系统,本文设计实现了能耗系统的功能模块层。功能模块层包括能耗查询模块,用户可以自定义查询条件(时间、用能场所、能耗类型等)来查询所需的能耗数据;能耗分析模块,可对能耗数据进行多维度的分析;并行数据挖掘模块,对采集到的海量能耗数据进行并行数据挖掘,挖掘出更深层的有用信息;多租户管理模块,提高了能耗系统的资源利用率,同时通过数据隔离与应用隔离保证服务的可靠性。3.结合系统采集的能耗数据与计算机CPU利用率、内存利用率等硬件数据,本文提出了一个能耗模型,该模型可以用硬件数据来预测计算机能耗。计算机硬件数据是可以轻易获取的,而通过电表、传感器来获取能耗数据既有传感器部署成本又有其自身带来的能耗损失,使用能耗模型来推测数据中心能耗,大大降低了数据的获取成本。本文首先给出了能耗模型的推导过程,并通过实验来得到模型的参数。
其他文献
<正>近日,北京星网卫通科技开发有限公司携旗下动中通、便携站和动中看三大类共七款移动卫星通信产品惊艳亮相CommunicAsia2014展会,展示了近乎完美的移动卫星通信产品。星网
阿普尔的课程理论在当代美国教育界有着广泛的反响,他的理论也引起了国内学者的极大兴趣。阿普尔教授的课程理论具有批判性特征和政治性特征,他运用情境化的分析方式分析了政治
在唯物史观视域中,人权与法治的关系是有关人权实现和发展的重要实践问题。人权与法治在基本理念上具有契合一致的一面,但这并不意味着人权的法治化运作的契合,而是存在着各
从南排土场的工程水文地质及排弃料物理力学性质入手,分析了排土场现状边坡及增加台阶后的边坡稳定状况。分析表明整体边坡都处于稳定状态,排土场扩容是可行的。
气溶胶对全球气候和区域环境变化有着重要影响。通过直接和间接辐射效应,影响地气辐射收支能量平衡,是引起全球气候变化的最重要不确定因子;通过散射降低大气能见度,是城市和
葡萄籽油富含不饱和脂肪酸,特别是亚油酸含量高达75.8%,为防葡萄籽油氧化,以多孔淀粉为壁材,在单因素试验基础上,采用二次通用旋转组合试验,对葡萄籽油微胶囊化工艺条件进行
遥测数据记录设备主要完成飞行器飞行过程中遥测PCM数据的可靠记录,并实时存储,落地后回收存储器,通过地面测控台读取相应的数据供上位机进行分析和处理。遥测数据记录设备由采
<正>CommunicAsia 2014汇集了全球一流的运营商、服务供应商、系统集成商和生产商,每年的参展商及观众群来自全球100多个国家地区。2014年6月17至20日,位于第一层展馆的SatCo
薇拉·凯瑟是美国著名作家,以描写西部草原而著称。凯瑟20世纪初写的三部小说—《啊,开拓者!》,《云雀之歌》,和《我的安东尼亚》—通常被称为“草原三部曲”,并引起了读者的
在交替传译的过程中,译员经常会遇到内容较长且逻辑关系复杂的句子。如何在较短时间完成翻译,便成为了交替传译的一项难题。笔者认为对于这些复杂句子的翻译应该注意以下两点:首