基于Hadoop的学术资源共享平台热点发现及推荐研究与实现

来源 :武汉理工大学 | 被引量 : 0次 | 上传用户:Jiang0596
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
学术资源共享平台通过采集、集成和存储各类学术资源,为用户提供统一的资源检索和下载入口,在促进学术交流、实现资源共享方面起着不可替代的作用。随着科学技术的不断进步,共享平台收录的资源数量急剧增多,导致用户想要快速准确地获取当前研究热点和找到需要的资源变得日益困难。因此,如何智能化地分析海量数据,为用户提供帮助和服务,是学术资源共享平台所面临的巨大挑战。本文结合Hadoop相关技术为学术资源共享平台存储和处理海量数据提供解决方案,并重点研究了学术资源热点发现及个性化推荐方法,实现从海量学术资源中准确快速地提取当前研究热点和挖掘用户偏好的资源。基于上述分析,本文主要研究工作如下:(1)研究了海量数据处理相关理论,结合Hadoop相关技术,设计并实现了一种海量数据处理模型,为学术资源共享平台提供存储与分析海量数据的能力。(2)设计了一种基于密度的文本聚类方法实现学术资源热点自动发现。采用空间向量模型以结构化数据表示学术资源,采用具有噪声的基于密度的聚类方法(Density Based Spatial Clustering of Appliactions with Noices,DBSCAN)对数据集进行聚类发现资源热点。通过合并具有明显包含关系的特征项,改善了热点发现准确度。本文基于Hadoop实现热点发现过程,提高了执行效率和扩展性。(3)设计了一种基于协同过滤的学术资源个性化推荐方法。通过将用户属性、资源属性和用户评分相融合,改善了推荐系统的准确度。本文基于Hadoop实现了学术资源个性化推荐,提高了推荐系统的扩展性和效率。(4)结合Hadoop和J2EE相关技术,实现学术资源共享平台。上述研究工作使学术资源共享平台具备存储海量数据的能力,并能够快速准确地从中分析提取出学术资源研究热点以及用户偏好的学术资源,对促进学术交流、提高资源利用率并增强共享平台增值服务体验具有重要意义。
其他文献
随着中国医疗体制改革推广和全民医疗保健意识提升,医疗器械行业呈现增长态势。但伴随全球竞争,在买方市场为主的行业内,医疗器械企业只得以赊销提高销售、扩大市场,带来较高
随着信息技术与工业制造的深度融合,设备运行过程中不断产生的海量状态数据被保留下来,使利用大数据分析的方法对设备故障进行有效识别和预测逐渐成为故障诊断领域的主流。但
当前中国处于经济转型以及经济增速换挡的大背景下,定向增发由于在当前的再融资手段中具有审批迅速、审查指标相对宽松的优势,是产业结构转型的重要融资工具,因此自2014年以
果蝇算法已经广泛应用于生活中的不同领域,本文将其应用于财务领域。尽管果蝇算法本身具有一定的全局优化能力,但果蝇算法在某些寻优过程中仍易出现局部最优、精度降低等问题
现代公司是以所有权和经营权相分离为基本特征的,这使得公司内部存在着多种委托-代理关系,而在信息不对称、合同不完全、市场不确定性等条件下,易出现代理人机会主义行为。现
研究目的:运动员身体机能状态是影响其竞技能力的重要因素。本文将对国家现代五项队女子运动员冬训训练期间的生理生化指标进行测试,并进行深层次分析研究,真实地反映我国现
在天文学领域中,重大的天文事件往往伴随着光变曲线亮度值的突变,因此,通过对光变曲线分析可以更好地捕捉重大的天文事件。本文的主要目标是通过对天体的光变曲线进行预测和异常分析,实现异常天文事件的预警工作,提高天文观测问题处理的实时性以及全面性。更进一步地推动超新星的发现及时并准确地探测微引力透镜和伽玛射线暴等一系列重大的天文学问题,促进天文学大数据的发展。目前,针对光变曲线序列的预测任务还停留在统计学
自上个世纪八十年代末起,审美教育便被写进中国的语文课程标准,成为促使学生全面发展的重要环节。外国文学作为高中语文教材的组成部分,对学生能力、意志、道德、情感等主体性的形成具有重要影响,是实施审美教育的主要载体。通过问卷调查,本研究发现高中外国文学教学存在以下问题:语文课程侧重培养学生分析综合、鉴赏评价等能力,未能突出学生意志、情感等主体性的塑造。外国文学教学应体现学生知、意、情的协调发展。李泽厚美
盈利是企业存在的重要目的之一,也是员工能够获得丰厚报酬的首要条件,二者都与企业管理的精细程度密切相关。作为企业管理的核心之一,绩效管理的精髓在于通过持续不断地循环,
膨胀土本身的工程性质十分特殊,对公路路基路面造成的危害十分严重,造成的损失十分巨大。因此,使用经济合理环保的改良试剂来改良膨胀土一直是学术界最为热点的问题之一。KCl是一种非常方便储存、配制且价格低廉的化学试剂,与其他种类的改良试剂有着明显不同的区别。本文主要从化学改良的角度出发,进行KCl改良膨胀土的实验研究,具体有关工作如下:1、首先进行了对膨胀土的基本物理指标的测定,得到了膨胀土的比重为2.