论文部分内容阅读
随着大数据时代的到来,数据信息在不断的增值,如何获取有效数据,并对这些数据进行合理化的分析得到潜在的价值数据,因而产生价值和服务是当前研究的主要方向。对于数据分析的概念,在早期仅仅只是通过人工的方式来进行数据的比对和查找,并使用一些常用的数据分析工具来进行,导致分析效果与场景应用差别太大,并且效率低下;另外,数据分析的基础就是有足够的有价值数据,在数据获取方面,由于获取方式困难,数据的有效性和实时性不能得到保障,这也导致了分析结果没有意义。因此,在数据时代,利用数据获取技术和分析技巧来实现数据的高效获取和定向分析,符合特定场景的采集及分析系统能够让人们省去很大的麻烦,简化消息处理过程,并提供合理化的信息支持。全民经济的提升也让旅游行业不断升温,在当前的时代下,通过获取旅游轨迹数据,通过定向分析来得到二次数据,为用户提供科学指导。本系统主要包含了数据采集、数据分析和数据展示三个大板块,数据采集模块为系统提供原始的用户数据,数据分析模块通过定制的策略得到分析得到价值信息,并提供给数据展示模块来前端显示。另外系统还提供了推荐服务和系统管理模块,为系统的注册用户提供个性化推荐功能,并让管理员可以使用系统管理模块进行综合管理。本系统使用Jsoup技术来进行数据采集过程,并利用Java技术和Python进行数据分析,数据库方面采用的是MySQL,采取了Tomcat中间件技术,加强了前后端之间的数据交互能力。本系统可以高效的完成数据的全链路过程,为用户提供有效的信息支持和操作简化。