基于深度图的虚拟视点绘制中空洞填补技术研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:vitchen02
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
现如今人们对视觉感官享受的要求越来越高,3D热潮方兴未艾,3D显示技术的发展催生出了越来越多的3D电视和手机。3D电视频道的增多和在移动终端上实时播放3D影片对传输带宽提出了很高的要求。此外,不断涌现的多视点电视和自由视点电视需要在接收端根据已有信号合成任意视角的虚拟视点图像。DIBR(基于深度图的虚拟视点绘制)技术凭借其兼容性强,灵活性大,经济性好的优点,逐渐成为了一种应用最广泛的虚拟视点图像绘制技术。本文对虚拟视点绘制技术的特点进行研究,特别针对3D绘制过程中的空洞问题进行处理,尽可能恢复空洞的纹理信息,提高合成的虚拟视点视频图像质量,为观众提高更好的视觉体验。首先介绍了DIBR技术的原理。从计算机图形学的角度分析了虚拟视点绘制的基本原理和基本过程,介绍了针孔摄像机模型和摄像机参数,进而给出了3D warping方程的推导。介绍了简化的DIBR技术原理。分析了DIBR过程中出现的一些问题,如重叠问题,虚假边缘问题和空洞问题等。并采用Z-buffer和形态学滤波对重叠问题和虚假边缘问题进行处理。其次,将Criminisi算法应用到了虚拟视点视频的空洞填补中,给出了该算法用于视频处理的解决方案。鉴于Criminisi算法难以保证实时性,本文采用背景提取、预填补、降采样和缩小搜索范围等方法来减少每帧填补所占用的时间。并在每帧填补完成后,将填补值的背景信息也更新到背景子块中以减小下一帧的空洞面积。针对虚拟视点图像的特殊特点对Criminisi算法进行了适当的修改,在优先级计算中加入了深度惩罚因子和深度一致性因子,保证填补从背景一侧具有平坦深度的位置开始填补,在匹配代价的计算中也加入深度因子。再次,给出了基于渗透率滤波的空洞区域填补算法,并针对算法的填补结果会出现填补区域的亮度与背景区域有差异的问题和因为个别点的噪声和虚假边缘导致的条带效应,本文对被填补区域进行了平滑滤波和亮度矫正。最后,为检验合成的3D视频的质量,完成了基于android系统的裸眼3D播放器设计。
其他文献
随着科学技术的发展,在很多领域,在数据处理上出现了维数灾难,大量的高维数据使得计算机在数据处理上变得复杂,包括机器学习,数据处理,模式识别,中心计算等等。室内WLAN的定位算法在
本论文主要研究了合成孔径雷达地面动目标检测技术,特别是被地杂波淹没的慢速运动目标的检测和成像处理方法。本文所做工作如下:1.建立SAR的运动目标回波模型,对目标运动引起
随着信息技术和多业务无线网络的飞速发展,无线频谱成为现代社会不可或缺的珍贵资源,认知无线电是实现频谱资源重复利用的最佳方案。保护授权主用户的正常通信,提高认知从用户通
在图象处理中,人们对于图象不同区域范围的信息需求不同。图象的某些特定区域可能会成为观察重点,而对那些重点观察区域之外的背景部分却不会有太多信息需求。这类问题就是图
.随着无线电设备的日益增多,频谱资源显得愈加缺稀,认知无线电就是对此提出的一种解决方案,以充分利用没有被用户占用的频谱资源。这一方案的核心思想是检测闲置的频谱资源并
TD-SCDMA作为中国首次提出的第三代移动通信国际标准,与WCDMA、CDMA2000一道成为IMT2000的正式成员,这是中国移动通信发展史上里程碑性质的重要事件。我国目前存在多个电信运
本文的研究背景是舰载高频地波超视距雷达系统,由于考虑实际因素,分析了舰载高频地波雷达及目标回波特性,利用线性调频信号推导出差频信号,建立海杂波信号模型。之后研究中尺度涡
传统的小波变换由于高计算量问题限制了其在图像压缩领域的广泛应用,光学小波变换集合了光信息处理和小波变换的优点,具有极好的并行性、超高速、大容量等光信息系统物理本质