基于Hadoop的通用流媒体系统设计与实现

被引量 : 0次 | 上传用户:yzq660511
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来3G移动网络发展迅速、无线视频业务日趋丰富,传统的流媒体服务器系统的可用性受到严峻挑战。首先在异构网络中,不同的设备往往采用不同的流媒体协议,而且3G设备同时扮演视频播放和视频采集的角色,传统流媒体服务器仅针对特定的环境和协议实现,无法实现统一的服务。其次,面对海量的视频内容,视频的转码等操作需要大量的复杂计算,而传统的转码服务器无法灵活的应对视频运算需求。论文结合《南京广电集团3G审片系统平台》和《太湖环境视频监测船(车/艇)载网系统研发》项目,围绕流媒体应用及视频转码技术实现展开,设计并实现了可灵活扩展的通用流媒体服务系统;同时结合云计算技术,将Map Reduce的集群应用于视频的转码处理,从根本上解决了流媒体系统的通用性问题。论文分析了流媒体系统中H.264编码和典型流媒体传输协议的技术要求,解读了MapReduce计算框架,并提出基于Hadoop的视频转码并行化处理方案,同时分析传统树形网络拓扑对集群性能的影响,并结合新型的TPL2-SW网络模型提出新的路由算法。论文设计并实现了基于SPSC架构的通用流媒体系统。论文的贡献在于:1)设计并实现了分布式的流媒体视频应用平台。该平台可以根据负载灵活的增加或者删除节点来满足不同规模的并发请求。2)提出了统一的视频源和流媒体发布接口。可以灵活定义多种源,视频处理模块和流媒体发布协议,针对异构的网路环境,对不同的终端提供统一的流媒体服务。3)设计并实现了基于线程池的混合网络并发模型,系统的吞吐量提高到7OOMbps,优于ASIO和ACE。4)将云计算的集群思想引入视频计算,利用Hadoop并行框架实现视频转码运算,解决了转码应用中计算能力不足的问题。5)针对TPL2-SW网络拓扑提出了新的路由算法,避免“小世界网络”中网络节点过热的问题。论文的成果已应用于无锡太湖水质监管系统,可推广应用至其它领域,如智能交通、小区监控和环境监测等。
其他文献
现阶段,我国众多资源型城市已进入了中期或后期发展阶段,随着经济的腾飞,这些城市必然会面临着资源短缺、产业结构单一、开采成本增加、基础设施不完善、环境污染以及投资吸引力
进入数字媒体时代,以互联网和移动互联网为核心的网络媒体已成为生活的必需品。互联网在为消费者带来新的用户体验的同时,也改变了消费者原有的媒体接触习惯,并对人们的生活
内部控制审计报告的披露制度起步于2006年前的自愿性内部控制审核阶段,2008年《基本规范》发布后,逐步发展到自愿性内部控制鉴证阶段,2010年三大《配套指引》发布后,2011年成为自
通过免疫组织化学方法,应用CD3、CD4和CD8单克隆抗体研究了CD3^+T淋巴细胞及CD4^+和CD8^+T淋巴细胞亚群在鸡盲肠扁桃体中的出现、迁移、组织定位分布及数量变化规律等一系列发育
本文的主旨在于研究环境行政法的基本理念问题。首先,在文章的开头介绍了环境行政法产生、发展背景及过程,对环境行政法的基本理念的概念做了科学的界定,认为环境行政法的基
运动不仅能给人带来强健的体魄,在心理上还能愉悦心情,使人更加的积极向上。当代大学生越来越重视自身的身体锻炼,不再一味的沉迷于网络,而是通过各种运动方式来缓解平时学习
研究了如何借助几何画板软件来模拟数学分析中的近似计算,如割圆术、微分近似、泰勒多项式、方程近似求根、定积分近似计算等.采取的方法主要包括几何画板提供的迭代、深度迭代
今天的中国近代建筑史研究依然延续着梁思成、刘敦桢等先生建立的学术视野,对中国近代建筑史的研究偏重于以北方官式建筑为代表的中国“古典”建筑。因此,学界对近代域外建筑
当今世界,环境和能源问题日益突出,电动汽车的出现顺应时代潮流,在一定程度上缓解了危机。但目前电动汽车尚未普遍流行,其主要原因是电动汽车的动力电池性能还不能满足要求。锂离
<正>一、课题的提出(一)研究背景:1、时代发展的要求。教师应根据学生对事物感兴趣的程度及不同方向,对学生提出一些宽松的、能发挥出个性特点的不同要求。教师要有目的、有
会议