基于Hadoop的房地产交易大数据分析应用系统

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:huang267321
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在住房和城乡建设领域,随着各种信息化技术的广泛应用,所产出的浩瀚基层数据蕴涵了不同维度下所涉及的行业和发展信息,并且已经呈现出大数据特征,传统的信息处理技术已经无法适应需求,急需数据存储结构和数据处理模式的转变。与此同时,Hadoop作为开源的大数据存储和计算框架,逐渐成为大数据时代的代名词,已经被各行各业广泛认可与应用。然而,当前房地产交易大数据分析主要停留在理论研究,基于Hadoop的行业应用也因为数据维度和数据量等方面的不齐全还难以给出行业全面的决策支持。本文便是基于开源的Hadoop发行版本CDH对房地产交易大数据分析与应用进行研究。详细阐述了大数据集群测试平台部署,分析、设计和实现了房地产大数据报表系统及房地产大数据分析及可视化系统,形成了“一平台两系统”框架。首先,本文就大数据基础理论与系统开发的框架理论进行研究。大数据基础理论方面,研究了数据分析的角度和Hadoop生态圈的主流组件,并选取了Kylin作为多维大数据分析引擎;系统开发框架理论方面,对比分析了B/S和C/S的架构,研究分析了基于ASP.NET的Web Forms架构和基于Java的SSM架构。接着,本文按照“一平台两系统”的框架思路,部署了基于CDH和Kylin的大数据测试平台,并对基础环境进行了配置优化。详细阐述了房地产大数据报表系统与房地产大数据分析及可视化系统的分析、设计与实现过程,并给出了实际编码示例。最后,结合实际的测试数据,测试与展示了“一平台两系统”。结果表明:系统通过测试与展示,验证了其符合初期设计的要求,达到了系统设计的目标,对于相关决策支持有着实际意义和实用价值。
其他文献
目的探讨妇产科围手术期静脉血栓形成的防治。方法我院2013年2月至2015年2月收治的80例妇产科围术期患者,按观察组和对照组各40例划分,对照组行妇产科常规干预,观察组针对临
微弱信号测量在激光测距、机械故障诊断、通信传输等领域有着极其广泛的需求。检测淹没在噪声背景中的微弱信号是现代信号处理的研究热点和难点。本课题根据微弱信号与噪声特
<正>今年以来,在"房住不炒"的定位指导下,房地产市场调控持续深入,市场运行较为平稳。上半年,房价整体同比小幅上涨,区域分化特征明显:一线城市房价环比涨幅保持低位,二三四
国有企业改革是我国经济改革中的核心部分。目前,国有企业改革仍然面临着一系列重大的障碍,其中经济的意识形态化是一个重要的方面。所以,只有大胆地破除这种障碍,实现经济的
随着时代的不断发展,国民经济水平的不断提高,公路桥梁建设的重要作用也逐渐显现。近几年,我国公路桥梁建设数量呈逐年增长趋势,在公路桥梁施工过程中,钻孔灌注桩施工技术因