基于Hadoop技术的高校学生行为分析系统研究与实现

来源 :北京邮电大学 | 被引量 : 23次 | 上传用户:sandybobo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会的不断进步,信息技术的不断发展,物联网、云计算和大数据等技术的不断完善,高校数字校园乃至智慧校园工程的持续建设,以及上层应用系统的不断增加,校园信息化环境中积累的数据也在迅速膨胀,已经初步形成了一个典型的校园大数据环境。传统的管理理念和管理方法无法满足日益增长的数据处理需求,如何对校园数据进行高效的管理和实现数据共享,是当今校园建设所面临的急需解决的问题。本文采用主流的Hadoop框架对校园环境产生的大规模数据进行存储和分析,研究了Hadoop技术在教育信息化领域的应用,研究形成基于Hadoop技术的高校学生行为分析系统的总体架构,研究形成高校学生行为分析系统的数据采集框架和算法,研究基于Hadoop技术的高校学生行为分析系统的功能架构和关键算法。完成了校园异构数据的分布式存储和处理,实现了校园数据的深入挖掘和分析。分析了科研数据,辅助及时关注学校科研动态,更好的指导科研发展方向。分析教师数据,辅助及时把握教学近况,合理指导教学方案的制定。进而分析学生数据,辅助及时掌握学生的行为动态,并对重点学生的行为发展进行预判。论文完成了基于Hadoop技术的高校学生行为分析系统的设计与实现,系统首先采用HDFS分布式文件系统完成对数据的采集、处理和存储,然后采用MapReduce编程模型对各个专题编写分析算法,进而对数据进行数据挖掘和智能分析,最后在此基础之上基于JAVAWEB并采用主流的SSH架构完成相关模块的开发,同时对分析结果进行图形化直观展示。本文中的系统,在北京邮电大学校园环境中进行了部署实施,测试结果得到了初步验证,并取得了一定的成果。
其他文献
目的 探讨喉罩通气在乳腺癌根治术麻醉过程中对通气功能和血流动力学的影响.方法 将54例乳腺癌根治术患者分为喉罩通气组与对照组,记录两组患者不同麻醉时间段的平均动脉压与
目的 探讨地佐辛在妇科腹腔镜手术后静脉自控镇痛(PCIA)的应用.方法 120例择期行妇科腹腔镜手术的患者随机分成三组,每组40例,术后采用PCIA,A组芬太尼30μg/kg;B组舒芬太尼2.0
一个服务员正在给餐厅里的51位客人上蔬菜,蔬菜有胡萝卜、豌豆和花菜。要胡萝卜和豌豆的人比只要豌豆的人多2位,只要豌豆的人数是只要花菜人数的2倍。有25位客人不要花菜,18位客人不要胡萝卜,13位客人不要豌豆,6位客人要花菜和豌豆而不要胡萝卜。请问:  (1)多少客人三种菜都要?  (2)多少客人只要花菜?  (3)多少客人只要其中两种菜?  (4)多少客人只要胡萝卜?  (5)多少客人只要豌豆? 
随着电力科技的革新,输配电生产管理不断向信息化方向发展,我们的电力系统再也不是传统的旧模式,它已经形成了大到国家电力部门,小到每村每户,形成了一个链,这是一个完备的电
诈骗罪是一种交互型的财产性犯罪,它的成立需要行为人实施欺诈行为和被害人实施处分行为。其中被害人的处分行为在诈骗罪的基本构造中起重要的作用,具有划清罪与非罪、此罪与彼
目的了解儿科门诊用药情况。方法随机选取2011年1~10月儿科门诊处方5000张,对用药频率和不合理用药进行统计分析。结果针剂使用率为58%,其中抗生素针剂占30%、中药针剂占27.8%
目的:考察各因素对五维赖氨酸口服液稳定性的影响。方法:以维生素C含量变化为指标,采用单因素试验考察抗氧化剂、水及pH对五维赖氨酸口服液稳定性的影响。结果:加抗氧剂溶液