基于视差信息的3D视频后处理的评估与改进

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:hsmwdevil
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人们对娱乐影音的体验要求不断提高以及3D电影的面市,3D视频逐渐成为当今计算机视觉和多媒体领域的新兴研究热点。由于3D视频较传统的2D视频增加了“景深”这一属性,因此针对3D视频的质量评估标准和处理方法与2D视频的情况有较大的不同。本文主要研究3D视频的后处理及其评估问题,提出了一种基于视差信息的3D视频客观评估方案,并在传统2D后处理方法的基础上,通过融入视差信息,提出了一种更适合于3D视频后处理的滤波方法,取得了不错的效果。由于立体摄像头的放置不可能满足两个摄像头光轴之间绝对平行的条件,因此实拍图像对的对应扫描行之间一般并非是完全对准的,这不仅可能给观看者带来视觉上的不适,也给视差信息的求取工作带来了一定的难度。为了简化立体匹配问题并给出较好的解决方案,对立体图对进行校正使对应的扫描行保持一致是一种较好的预处理方案。通过对摄像头进行标定虽然能取得较好的立体校正结果,但是标定过程一般比较繁琐,且标定结果受摄像头内部参数和摄像头间相对位姿变化的影响较大。不仅如此,现实中有很多3D视频并没有现成的标定参数可以利用。因此,研究未标定的图像校正问题具有非常重要的现实意义。在上述背景下,本文在第二章重点研究了此类图像校正问题,提出了适用于未标定立体图对的图像校正方法。实验结果表明,该方法能获得较好的处理结果,校正后的立体图对基本上可以满足后续立体匹配步骤的要求。为了了获得输入3D视频的视差信息,对校正后的图像对进行立体匹配时,采用了基于区域的立体匹配方法以获得稠密的场景视差图。考虑到拍摄3D视频时其摄像头多为会聚放置,因此,为了更好地获取感兴趣区域的深度信息,本文在第三章对会聚放置模式下的匹配模型进行了分析,并给出了一种基于图像MeanShift分割结果进行视差求取和优化的立体匹配算法。首先计算立体图对的初始视差,然后选取GCP(Ground Control Point)进行种子点生长,接着采用平面模型按区域对视差进行拟合,最后采用BP置信传播算法对视差结果进行全局优化以获得高质量的稠密视差图。为了减少立体匹配算法的运行时间以满足实际系统的应用需求,本文还研究了基于GPU的立体匹配算法的计算加速问题,取得了较满意的效果。在后续的第四章中,本文对3D视频的评估问题进行了讨论。首先将传统的2D视频后处理方法施加于压缩后的低分辨率3D视频并对其视觉效果进行了主客观评估。接着利用所获得的3D视频的视差信息提出了一种基于视差信息的3D视频后处理改进算法,在消除图像块效应和减少深度感损失方面取得了较好的平衡。实验结果表明,所提出的算法在物体的3D边缘处具有更好的处理效果。最后,在第五章对全文工作进行了简短的回顾和展望。值得指出的是,本文基于3D视频后处理的改进算法需要获取物体边缘较为准确的视差信息。因此,如何从3D视频中得到准确的边缘视差信息将是今后一个重要的研究课题。
其他文献
嵌入式智能视频监控服务器使得监控系统前端数字化、网络化和智能化,能够非常方便地集成到现有的模拟监控系统中,利用现有的资源实现视频的网络化传输和管理。同时嵌入式智能
感应耦合电能传输(Inductively Coupled Power Transfer)简称ICPT,它是将电能以非接触的传输方式传递给用电设备,消除了传统的接触式供电方式存在的缺陷,是一种安全、可靠的电能传
自动化锡焊概念即是针对电子产品的高精度装配与焊接的要求提出的,通过对机器人进行工作路径的试教,引入机器视觉技术,可以来修正误差,实现其焊接点的精确定位。本文构建的电
目前,我国垃圾焚烧炉系统主要是靠人的肉眼通过观火孔,来观察垃圾焚烧的状态的。通过人工观火来调节炉排的动作,调节垃圾的焚烧状况,不但劳动强度大,危险性高,而且如果调节不
随着信息技术的飞速发展,全球经济呈现出一体化的趋势,数据不再是集中式的存放在一个站点上,绝大多数数据库以分布式的形式存在,即数据是分布在两个或多个站点上。为了挖掘出
模块化非线性系统作为非线性系统的一种形式,因其结构简单,适应性强,被广泛应用于工业系统中。但由于各种非线性特性的存在,经典的线性系统辨识方法无法直接应用于这类系统的辨识
学位
随着不断增长的成品油市场,如何保证油品准确计量、公平交易以及维护加油站管理秩序、提升加油站市场竞争力已经成为政府和社会关注的焦点。同时伴随着云计算技术的发展和应用
在石油钻井工程技术中,随钻测量系统可以在井下靠近钻头处实时测量近钻头的钻压、扭矩等工程参数,真实的反映井下工作状况,以提高钻头的工作效率,有效避免钻井事故的发生,实
固体氧化物燃料电池(SOFC)具有高能量转化效率、零污染、零噪声等优点,因此是一种十分理想的可替代能源。SOFC在应用中,要保持安全、高效的运行状态,SOFC电堆的工作温度环境起着关键作用,为此必须为其设计出合理的SOFC热管理系统对其工作温度进行合理、有效的控制。SOFC热管理系统的设计需要考虑的因素很多,主要包括工艺结构的设计、控制策略的设计、控制策略的实现等几个重要方面,本文将从以上这三个方