【摘 要】
:
随着视频共享系统和编辑软件的出现以及广泛使用,共享系统中的视频数量和种类快速增加。在这些海量视频中存在大量重复或在内容上高度近似的视频,增加了用户与视频共享系统之
论文部分内容阅读
随着视频共享系统和编辑软件的出现以及广泛使用,共享系统中的视频数量和种类快速增加。在这些海量视频中存在大量重复或在内容上高度近似的视频,增加了用户与视频共享系统之间的网络带宽消耗。视频的访问热度分布服从帕勒托分布,少数热门视频占据绝大部分访问量,而大量冷视频的访问量很少或是没人访问。共享系统中不能发生用户数据丢失,导致大量冷数据的长期存储累积开销会非常可观。如何有效地减少近似视频上传带宽消耗,保证视频数据不丢失的前提下实现冷视频数据空间减缩来节省系统整体开销且不对用户的访问造成过多影响成了一个挑战。设计了一种在海量视频共享系统中基于溯源的数据减缩方法—Dpbvd,对系统中已有视频进行编辑时,通过将视频的编辑操作转移到服务器上,避免视频的上传,从而节省带宽。同时又缩减系统中具有溯源信息的冷门近似视频数据来降低服务器整体管理开销。数据减缩方法是指重复数据删除和近似冗余数据压缩。在客户端,用户编辑视频时收集相关的编辑操作信息和视频信息作为新生成视频的应用层溯源信息,并上传至服务器。在服务器端,系统记录每一个阶段内视频的访问次数以及自上传后的累积访问次数,综合考虑视频的访问热度趋势和近期访问次数来动态预测视频的冷热程度;缓存热度高的视频,降低访问时延;对于冷视频,保留不具有溯源信息的冷视频。通过扫描收集的溯源信息,找到具有溯源信息的冷门视频而将其压缩而节省存储开销,具有溯源信息的视频压缩后可根据溯源信息而重新生成,从而系统不会发生数据丢失。试验测试表明,海量视频共享系统中基于溯源的数据减缩方法能够有效节省共享系统视频存储空间,且冷热视频预测精确度高,不会显著影响用户访问视频的速度。
其他文献
Web服务具有开放性、跨平台性、松散耦合性、互操作性及高度动态性的特点,这些特点使得Web服务非常容易受到安全性方面的攻击,因而Web服务的发展空间和应用深度在很大程度上
随着基于Hadoop平台的大数据技术不断发展和实践的深入,Hadoop YARN(Yet Anouther Resource Negotiator)资源调度策略在异构集群中的不适用性越发明显。一方面,YARN资源调度
随着信息技术的迅速发展和计算机应用项目的大量推广,网络数据服务中心的数量大量增加。计算机系统的规模也越来越大,其系统性能也不断的提升,计算资源的种类越来越庞杂。在
分类是模式识别及人工智能的重要研究领域,由于分类器的优劣缺乏统一的评价标准,因此寻求提高分类器的准确度和泛化能力成为一个主要的研究方向,为了充分利用不同分类器之间
随着数据挖掘技术的成熟,信息产业的不断涌现,以及互联网的迅速发展,人们日常生活需要的信息量以指数级速度增长。传统的数据分析和查询方法在实际应用中不能满足人们对隐藏
据世界卫生组织的发表《全球疾病负担》[1]评估报告显示心血管疾病已成为全球头号健康杀手,而这其中患者的主要死亡于心脏病和中风。随着近年来心血管疾病治疗技术的进步,外
多径传输使用多条连接流分割节点和流汇聚节点的路径进行传输。相对于传统的单径传输,多径传输具有充分利用网络资源、减少拥塞、提高传输可靠性和提高网络的安全性等优点,是
移动增强现实即在移动设备上将虚拟物体与真实场景进行叠加,实现两者的有机结合。目前大多数移动增强现实技术着重于对摄像头视角内对象进行可视化,但受制于其屏幕限制,无法
日新月异的计算机科学技术的迅猛发展给社会各个领域尤其医学领域带来了巨大的革新,医疗卫生行业逐步实现了信息化。电子病历作为医疗机构最重要的文件,其本身的信息化程度直
图处理系统正被广泛的应用于各个领域的数据分析中,随着图处理任务的增加,它们需要有效的应对多任务环境。现有的图处理系统一般针对单一任务设计,在执行并行任务时存在图数