淘宝搜索数据采集与分析系统的设计与实现

被引量 : 0次 | 上传用户:zimomo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网对各个领域的渗透融合,C2C(consumer to consumer,即消费者个人对个人)模式的电子商务得到飞速发展,改变了传统的消费购物方式。各种各样的电子商务网站不断涌现,在为人们提供物美价廉商品的同时,极大的方便了人们的工作和生活。目前我国最受欢迎的购物网站非淘宝网莫属,十年前,淘宝网还只是电商公司阿里巴巴旗下的“网上拍卖”试验品,第一年全年销售额只有8亿元人民币,在2012年,淘宝全年销售额突破了一万亿元大关,前淘宝CEO马云预测,在下一个十年,淘宝将迈入十万亿元时代。从数据的角度来看,当前淘宝上卖家数已突破两千万,而商品数据更是成为海量数据源。如何对海量数据进行数据挖掘,分析出有价值的信息,为商家提供销售指导并增加商品销量具有很强的现实意义及广阔的应用前景。本文针对这一问题,进行了相关的研究与软件开发与设计。本文研究对象为从淘宝网上抓取的箱包内商品数据。就当前情况而言,淘宝网所有数据均存储于其后台服务器数据库中,外部无法全部获取,但本文能通过淘宝网提供的搜索接口,在一段时间内对箱包名目下特定关键字下排名靠前的上千数据进行抓取;以boost下正则表达式为基础进行语法解析,分析出有价值的信息,存储于数据库中;根据特定模型,最终软件能实现分析销售额及销售量、商品销售排名,成交时间、商品销售排名、价格分布、信用分布、卖家排行及卖家地域分布功能。
其他文献
道路运输是我国综合运输最大的组成部分,道路运输信息系统对道路运输管理、服务和行业发展有着重要的意义。道路运输信息系统的数据挖掘是发现和利用道路运输数据内在知识,实现
中国正处在城镇化加快发展的阶段,将有越来越多的农村剩余劳动力逐渐转移到非农产业和城镇中来。解决好农民工的就业问题,既是关系改革发展稳定全局的迫切任务,也是建设中国
传统村落是我国文化遗产保护体系内非常重要的部分,在全球化冲击下,村落遗产保护面临危机日趋严重;同时,由于我国乡村规划理论基础的薄弱,及“村镇”作为同一概念的长期研究习惯,适
以兴安落叶松刨花和脲醛树脂胶黏剂为原料,采用正交试验法研究热压温度、热压时间、施胶量、密度工艺因子对刨花板甲醛和其他挥发性有机化合物释放量的影响。结果表明:热压温
开关磁阻电机是一种新型的特种电机,其调速系统较传统的交、直流调速系统具有明显的优势。电动机测试是对电动机各项指标进行检测验证,判断其是否符合设计指标,能否满足安全使用
《教师教育课程标准(试行)》强调了教师教育课程的实践取向。文章通过解析我国高等师范院校特殊教育专业本科生实践能力培养过程中存在的突出问题:教学实践课程课时不足,形式
血管钙化是异位钙化一种,分为中膜钙化和内膜钙化,中膜钙化相关的疾病有肾病、糖尿病等,而内膜钙化主要与动脉粥样硬化有关。血管钙化亦是心血管疾病的一危险因素,是慢性炎症
改革开放以来,我国金融领域的改革逐步深入,金融结构不断优化调整。作为金融体系主体的商业银行在金融结构变化下面临着越来越大的冲击和影响。成熟和健全的资本市场和货币市场
根据云南省西双版纳热带雨林自然保护区生态环境特点和高速公路的建设条件,结合植被的生态恢复与重建理论,分别对思小(思茅-小勐养)高速公路的边坡、中央分隔带、立交区、隧道和
21世纪,全球老龄化的浪潮铺面而来,我国也将面临老龄化尤其是城市老龄化带来的巨大的养老挑战。我国由于老年人口基数庞大和家庭结构变化,加上普遍住房适老化不足,传统的居家养老