基于可视化技术的音乐数据分析平台的研究

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:wzq558
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网时代的到来,在线音乐蓬勃发展,数字化音乐数量与用户数量也随之呈爆发式增长趋势。基于网易云音乐的海量数据资源,运用可视化的技术对其进行数据分析,探索用户关注行为背后的潜在规律,挖掘音乐相关的话题信息,了解音乐的风格类型以及用户喜好,从而建立了网易云音乐数据分析平台。2013年4月23日,网易发布了一款音乐互联网产品,就是我们所熟知的网易云音乐。它的主要特点是个性化推荐服务,由各种有音乐审美经验的创作者以及有独立音乐品味的爱好者,以歌单为主要模式进行推荐,其中也有社交功能和互动功能。在这个崇尚个性化的时代,网易云音乐打破了传统音乐的热门推荐,针对个人进行千人千面的音乐推荐服务。因此,赢得了海量的用户资源和音乐资源。基于以上情况,本课题设计了一个基于网易云音乐的数据分析平台,主要模块包括数据采集、数据存储、数据分析、数据可视化四大模块。结合网易云音乐的海量用户和音乐资源,用机器学习和深度学习算法对它们进行数据分析,从大致三个方向分析:用户影响力分析,使用到了 PageRank算法和Triangle Count算法;歌曲风格分类预测,主要用到了深度学习中的MLPC多层感知器分类器算法;评论数据话题挖掘,使用了基于模块度增益的社区检测BGLL算法。这样三大核心功能就覆盖了本课题的主要内容。根据预先的设计思路实现了一个数据分析平台,主要流程是利用网络爬虫及Flume采集技术进行数据的收集,然后将收集到的数据存储到分布式文件系统HDFS上,再使用Spark分布式计算技术和机器学习以及深度学习算法对数据进行分析,最后将分析的数据存储到MySQL中,并进行可视化的展示。
其他文献
近年来物联网设备增长迅猛,在带给人们生活便利的同时也带来了潜在的攻击面,设备中的0Day漏洞可能会严重威胁到用户的隐私数据。针对物联网设备的漏洞挖掘技术研究成为了安全领域的研究重点。物联网设备的复杂异构、无源码以及强硬件依赖的特征导致通用软件漏洞挖掘技术无法直接应用于物联网设备之上。随着技术的发展,当前已有多种技术应用于物联网设备的漏洞挖掘中。模糊测试技术是一种有效的漏洞挖掘技术,但在物联网设备环
短视频App日渐流行的时代背景下,以“两微一抖”为代表的社交新媒体在大众社交中的作用越发重要,不断地推动人们的网络社交方式逐渐由文字社交变成图像社交,再到现在的视频社交.同时,旅游作为一项信息敏感性活动,其出行选择行为会受到明显的网络社交信息引导影响.因此,短视频社交平台成为旅游者进行旅游行为决策的一个重要信息参考源,进而催生了网红旅游地打卡热潮.抖音App作为短视频社交平台的典型代表,其所发布的旅游短视频从“生产”到“传播”再到“欣赏”的过程中,会受到来自信息发布者的意见领袖、信息接收者的自我一致性、功
宏观调控是市场经济的内在要求.宏观调控是对市场经济的宏观调控,是对宏观领域的调控,内含着科学调控,并且必须是依法调控.目前我国的宏观调控还存在随机性、缺乏长远性、缺乏程序性以及有些措施不当、不能追责等问题.宏观调控迫切需要制度化、法治化,因其具有前瞻性、权威性、稳定性、科学性和灵活性等共同属性也完全可以法治化.宏观调控法治化要依法规定宏观调控的原则、机构、权限、程序和责任等要素,并通过发展规(计)划、财政政策、货币政策以及产业政策等的法治化予以贯彻落实.宏观调控法治化是国家治理体系和治理能力的重要方面,也
“黄河战略”的提出与实施,是实现中国生态文明建设的重要组成,也是实现中国经济可持续高质量发展的重要举措,更是实现中国区域协调发展的重要布局.然而,黄河流域生态保护和经济发展仍然存在很多问题,包括:生态环境恶化,水资源污染浪费严重;区域内部经济差距变小,外部经济差距拉大;利益关系协调缺乏,利益矛盾问题较为严重;传统产业占比比较大,产业转型升级面临压力.因此,需要从五个方面实现黄河流域生态保护及经济可持续发展:一是加快制定和出台黄河流域相关区域规划发展政策;二是加强生态保护和修复力度,注重不同政策的对接和融合