电子商务环境下面向海量数据的个性化推荐系统的设计与实现

来源 :东南大学 | 被引量 : 0次 | 上传用户:tp153c
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的迅速发展,电子商务已经成功融入进人们的日常生活中,成为必不可少的一个部分。个性化推荐技术作为一种重要的信息过滤手段,目前被广泛用于电子商务的各项应用中。然而随着电子商务应用的用户和商品数量逐渐增多,数据规模急遽扩大,已有的推荐系统在性能和执行效率方面已逐渐落后,存在实时性差,稀疏性问题严重,计算效率低等缺点。  本文针对原有推荐技术在稀疏性、可扩展性、实时性等方面的问题,设计并实现了一个高效的个性化推荐系统。在推荐系统的离线部分,本文提出了一种全新的用户兴趣度模型——个性描述树,更准确地描述了用户对商品的兴趣度。在此模型基础上,提出了基于最小哈希聚集的电子商务个性化推荐算法PSLH,利用哈希聚集的方式求取用户之间的相似度以简化计算复杂度,并将其部署到云计算环境下,采用MapReduce技术实现算法并行化,有效提高算法的计算效率和可扩展性,缓解了稀疏性问题。除此之外,本文还提出了基于商品属性的关联规则挖掘算法ARM,利用关联规则挖掘技术发现商品的内在相关性,从而形成推荐,实现了推荐结果的多样性。在推荐系统的在线部分,本文利用web日志记录用户的行为,并根据最近行为形成实时推荐,有效缓解实时性问题。  本文所设计开发的个性化推荐系统被部署在东南大学云计算中心,并使用中国制造网的真实数据对系统进行测试,在此基础上本文设计了Portal电子商务平台对推荐系统产生的结果进行演示。测试结果表明,相对于传统的推荐算法,本文开发的个性化推荐系统中采用的算法具有良好的推荐性能和执行效率,完全符合拥有海量数据的电子商务环境对个性化推荐技术的需求。
其他文献
嵌入式图形用户界面通常具有空间占用小、运行速度快、控件丰富、开发周期短、稳定可靠等特征。X Window(通称X)作为Linux系统领域最为成熟的窗口系统,可支持多种风格的用户
近几年,大规模开放网络课程MOOC引发全球的关注和参与。自动答疑是MOOC平台中重要的辅助教学模式,采用问答系统实现自动答疑是目前研究的热点内容。目前国内多数教学问答系统对
随着Web的快速发展,如何从Web网站中获得想要的信息成为亟待解决的问题,因此Web信息抽取成为必要,Web信息抽取技术也成为当今的一个研究热点。Web信息抽取需要解决的问题是:如何
本文利用声发射技术,对碳纤维三维编织复合材料在拉伸过程中损伤发展、演化进行了实验研究。实验采集了碳纤维三维编织复合材料的声发射相关特征参数和波形,并利用小波变换算
信任和授权是未来PKI技术的一个重要的发展方向,步入授权领域已成为一个发展趋势。本文介绍并简要的分析了PKI技术和P2P网络;分析了PKI的信任模式和主要的证书类型;讨论了各
随着网络通信的飞速发展以及多媒体技术的广泛应用,数字产品版权的保护问题变得越来越重要。数字水印技术已成为解决数字多媒体版权问题的主要工具。本文研究了用于图像版权
在面向服务的软件架构中,功能有限的单个Web服务往往不能满足用户的复杂应用需求,因此人们提出了一种方法,将现有的Web服务按照一定的规则组合起来,从而可以实现具有复杂业务逻辑
体视化(VolumeVisulization)尤其是其中的体绘制(Volume Rendering)是三维数据场可视化领域最重要并且发展最迅速的一项技术。在医学三维重建、计算流体力学、地震地质等众多
移动群体感知中,移动终端集成了多种感知设备和通信端口且分布广泛,能够收集、共享各类感知数据。然而感知节点在感知能力、通信端口、移动规律等方面与收集实时、精确且覆盖
作为IETF正式颁布的网络层安全标准,IPSec协议是一组网络安全协议的集合。它可以为网络上传输的信息提供基于密码学的保护,为IP数据包提供机密性、完整性、可认证性等安全服务