【摘 要】
:
一个大数据解决方案需要面对三个关键问题:大数据的存储、大数据的分析和大数据的管理。首先综述了大数据和Hadoop生态系统的定义;然后从商业产品和Hadoop生态系统两个方面来
【基金项目】
:
国家核高基项目(2010ZX01042-001-003)
论文部分内容阅读
一个大数据解决方案需要面对三个关键问题:大数据的存储、大数据的分析和大数据的管理。首先综述了大数据和Hadoop生态系统的定义;然后从商业产品和Hadoop生态系统两个方面来探讨如何面对大数据,重点分析了Hadoop生态系统是如何解决的:分别用HDFS、HBase和OpenTSDB解决存储问题,用Hadoop MapReduce(Hive)和HadoopDB解决分析问题,用Sqoop和Ganglia等解决管理问题。对于每个成员,分别分析了其系统架构、实现原理和特点;对于重点成员,分别分析了其存在的一些问题或缺点,并在总结当前学术和应用的进展基础上,结合我们自身的研究进展,提出了解决方法、解决思路和观点。可以预见,Hadoop生态系统将是中小企业在面对大数据问题时的首选解决方案。
其他文献
为评判实施机械零部件再制造的可再制造度,提出机械零部件可再制造度评价的总体流程框架;基于模糊评判量化分析机械零部件的失效特征,并建立涵盖技术可行性、经济可行性和资
本文提出了一种结合带有通信协议的无线通信模块SIM300和GPRS无线通信技术的短信传输方案,对短信息控制方法进行了介绍,并详细描述了GPRS短信传输终端的软硬件设计和实现过程
叙述了中国锰矿资源的基本特点、资源开发利用及锰矿资源的供求状况,针对锰矿资源勘查现状进行了总体设想,并依据成矿地质条件优选划分了9个找矿远景区。
坚持党对军队的绝对领导这一建军原则,是在毛泽东和朱德创建的红四军发展过程中形成的。确立科学合理的党军关系,不仅对当时红四军的发展极其重要,而且日后也成为中国共产党
医学领域中的红细胞图像要求检测出细胞面积、圆度及个数等特征。针对该检测需求,提出一种基于改进Canny算子的图像边缘检测算法,采用迭代算法计算最佳高低双阈值,以数学形态
伴随着经济的飞速发展,企业和各个机构的管理模式均发生了巨大变化,医院也不例外。医疗卫生行业是一个特殊的行业,它机构庞大,人员管理比较复杂,这就对医院管理者的管理水平
直驱式电液伺服系统中用交流伺服电机替代传统液压系统中的电液伺服阀,通过改变定量泵转速来调整流量。该系统具有能耗小、造价低、可靠性高、制造安装简便、抗污染能力强等
大直径薄壁管件主要用于航空航天和兵器工业,而金属旋压工艺最重要的一个优点是能制作整体无缝的回转体空心件,根本消除了与焊缝有关的不连续性、强度降低、脆裂和拉应力集中等
<正>党的十九大报告对我国社会主要矛盾作出了全新论断,并指出建设教育强国是中华民族伟大复兴的基础工程。可以说,办更美好的教育既是破解新的主要矛盾的治本之策,也是满足
深度营销不同于精准营销,也不同于深度分销;而深度营销却是以全新的营销理念,以企业战略的高度,重新对营销的本质进行定位,体现的是营销的精益化,它是品牌、市场份额以及企业利润三