基于Mesos和Docker构建大数据平台技术研究与应用

来源 :吉林建筑大学学报 | 被引量 : 0次 | 上传用户:ssqjwz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文针对目前在集群中各种框架分别独立运行、框架间静态划分资源、集群中资源利用率低、吞吐量低等问题进行了研究,提出以Mesos分布式资源管理技术和Docker容器隔离技术,构建一个将不同的大数据框架整合在一起的基本大数据分析处理平台,允许不同的大数据分析框架之间在同一个集群内共享资源分配,跨框架管理集群资源,提高了集群内资源使用率和吞吐量,增加了大数据分析平台的灵活性和扩展性,降低了大数据平台的复杂性.
其他文献
自1986年以来,清华大学智能技术与系统国家重点实验室THMR课题组先后承担了与无人车技术有关的“七五”至“十一五”国家科技重点项目6项,国家“863”计划、“智能交通”等科技
“城市双修”理念的提出在当下发展环境中对城市与环境的健康协调发展起到了至关重要的作用,特别是在历史文化名城方面。其中保定市作为历史文化名城,因受到城市本身和外部环境发展要求的同时作用,其保护规划在城市发展引导方面存在不足并呈现一定的滞后性。由于城市发展一方面需要考虑到对传统文化的保护和特色风貌的延续,另一方面需要解决城市机能衰退带来的物质环境问题对城市建设方面提出的迫切需要,因此要求历史文化名城保
基于池火灾与喷射火灾模型,通过计算机模拟评价成品油罐区火灾事故后果,预估了火灾事故造成的人员伤亡和财产损失范围。可为储罐区的安全和应急管理提供借鉴。
试论适度稳健在我国的适用性□赵宜江当前,我国有一种观点认为,现阶段我国应该实行适度稳健。但是,笔者认为,现阶段我国实行适度稳健还为时过早。以下,本文拟对此加以详细论述。一
期刊
采用田间试验研究了地膜覆盖与烤烟根系及烟叶产量品质的关系。结果表明:烤烟移栽后不同时期盖膜处理根的长度、数量、干重明显大于不盖膜处理,80d时根的长度、数量、干重与盖
"回回"一词最早出现于北宋人沈括所著《梦溪笔谈》卷五中,此处"回回"存在多种理解和解释,即当"回纥"、"回鹘"进行理解时,也跟伊斯兰无任何联系."回回"作为回族族称,最初的词
蒲松龄与淄川邱氏的交游行迹,见诸聊斋诗文。《淄川邱氏世谱》创修于康熙四十四年(1705),为邱氏十二世曾孙邱行素编篡,载录了邱氏家族的世系、迁徒、婚姻、族人事迹等多方面的资料
分析比较粮食作物区域产量保险、天气指数保险的不同定价方法,对于提高财政保费补贴资金的使用效率,促进粮食作物保险持续、健康发展具有重要的意义。以长沙县早稻保险为例,
易中天先生所著之《帝国的终结——中国古代政治制度批判》介于随笔与专著之间,部分论述具有独到而深刻的见解,不过从专业的角度审视,却有不少似是而非的败笔,可以归纳为五个
石墨堆芯结构包围球床堆芯,是高温气冷堆的重要组成部分。为满足其长期安全可靠运行的要求,使其设计合理、完整性得到保证,对石墨堆芯结构的动力学响应和结构完整性进行了研