【摘 要】
:
目前虚拟现实技术发展迅速,其中立体全景视频作为虚拟现实呈现的重要载体,能够提供给观看者无与伦比的沉浸感。然而立体全景视频的制作需要经历拍摄、拼接、投影、编解码等多个步骤,在这些过程中立体全景视频往往会受到各种失真因素的影响。为了保证立体全景视频呈现的最终质量,对立体全景视频进行质量评价具有重要的理论和现实意义。为了开展相关研究,本文建立了立体全景视频质量评价数据库。在考虑了立体全景视频的制作与播放
论文部分内容阅读
目前虚拟现实技术发展迅速,其中立体全景视频作为虚拟现实呈现的重要载体,能够提供给观看者无与伦比的沉浸感。然而立体全景视频的制作需要经历拍摄、拼接、投影、编解码等多个步骤,在这些过程中立体全景视频往往会受到各种失真因素的影响。为了保证立体全景视频呈现的最终质量,对立体全景视频进行质量评价具有重要的理论和现实意义。为了开展相关研究,本文建立了立体全景视频质量评价数据库。在考虑了立体全景视频的制作与播放过程的基础上,本文结合立体信息、全景信息与视频时域信息三方面展开研究,从而提出两种立体全景视频的无参考质量评价方法。本文的主要成果与创新点如下:本文针对立体全景视频在编解码过程中受到的失真建立数据库。通过对13个无失真视频源施加不同方式与不同程度的H.264、JPEG2000压缩处理,最终得到377个失真的立体全景视频。该数据库中的视频种类丰富、场景多样,为后续的研究成果打下基础。方法一为基于三维卷积神经网络(3-Dimensional Convolutional Neural Network,3D CNN)的立体全景视频质量评价方法。经过灰度差值预处理获得局部视频块后,该方法通过3D CNN提取局部视频块的时空域信息。针对全景投影的特点,本文设计了一个分数融合策略,对不同位置的视频块分数赋予不同的权重,加权求和得到最终质量分数。方法二为基于非局部球形卷积神经网络的立体全景视频质量评价方法。该方法将多个立体全景视频帧进行灰度差值预处理,然后反投影回球面,利用球形卷积神经网络在球面进行空间域特征提取,并结合非局部神经网络提取时域信息,最后对于不同时间段的立体全景视频质量分数平均求和得到最终的质量分数。在数据库中分别对两种方法进行了大量的实验,均得到了实质性的性能提升,结果表明这两种方法具有良好的针对性与有效性。
其他文献
计算机断层成像技术(Computed Tomography,CT)可以在未经手术的情况下获取病人体内密度信息,是临床图像诊断的重要手段之一。病人体内如果有金属植入物,则会在CT图像中产生金属伪影,此金属伪影会严重干扰临床诊断结果,并影响放射治疗计划中剂量计算的准确性。目前来说,去除金属伪影的传统方法主要集中在对投影数据的处理上,而不能应用于重建后的CT图像,不便于医院、普通研究者等无法获取投影数据
金属3D打印技术(也称增材制造),相对于传统的减材制造技术,其制作过程更简单,能够生产出结构更为复杂的工件,越来越受到各个领域的重视。然而,3D打印技术还处于高速发展时期,技术尚未完全成熟,因此打印工件内部存在不同类型的缺陷。孔隙缺陷很大程度上会影响工件性能和工件使用寿命。检测出工件中孔隙缺陷的位置、形态、数目,可以为缺陷形成的技术机理研究提供分析基础。CT技术能够在不破坏工件的情况下,重建出工件
近年来,与日俱增的移动相机如无人机搭载相机、可穿戴相机等,能够以灵活的视角对场景中目标进行观测。无人机搭载相机的垂直俯视视角能够以广阔的观察视野对目标进行观测,可穿戴相机的平视视角能够以沉浸式的视角对目标进行观测,二者互补能够对场景中目标进行灵活有效的全方位观测。跨大视角的多相机协同技术,使得基于俯视和平视视角结合的视频监控技术在目标跟踪、行人再识别、行人动作检测和行为分析等领域有着重要的研究意义
《大秦驭手》是一款马车驾驭虚拟体验系统,旨在为博物馆和个人用户提供秦代马车的趣味驾驭体验,展现了秦代的历史背景和风貌。为了提升用户体验效果和沉浸感,展现更好的游戏场景,对图形效果提出了更高的要求。本文通过为《大秦驭手》虚拟体验系统设计游戏特效开展了系统的实践研究,设计并开发完成多种特效系统:云雾特效系统、材质特效系统、镜头特效系统以及物理特效系统。并使各个系统有机结合。在塑造了鲜明的游戏视效风格的
作为智能交通系统的重要组成部分,车载自组织网(Vehicular Ad hoc Networks,VANETs)的发展一直受到国内外各界的关注。然而由于无线访问介质的开放性和车载自组织网自身的特性,其非常容易受到外界的各种攻击,这严重影响了车载自组织网的广泛部署与应用。为了确保道路交通的安全并保护用户的隐私,在车载自组织网中提供有效的匿名身份认证成为当今研究的热点。当前的认证方案大部分采用传统的假
在互联网技术迅猛发展的背景下,用户画像技术被广泛应用于各个领域,其核心是通过对用户各类行为进行分析,从而将用户特征抽象为标签形式。本文以真实校园网络行为日志为基础,对校园网络用户画像进行了深入研究。针对校园网络行为日志对学生行为类别表述模糊的特点,本文提出了融合压缩DOM树结构向量的行为类别标签预测模型,通过融合网页文本特征向量和DOM树结构向量并使用分类器进行分类,实现了对学生浏览网页的类别预测
近年来,随着计算机技术的发展,隐蔽通信已经成为一个比较活跃的话题。在本研究中,我们通过利用数字音频水印技术来实现隐蔽通信。数字水印是一种有效的军事领域秘密通信的技术,可以解决传统加密中存在的问题。它是将具有特定含义的信息嵌入到原始信号中而不影响其正常使用的过程。在传输时只需要传输嵌入水印的信号即可。由于信号在传输过程中,可能会遭遇不同程度的有意或者无意的攻击,因此在嵌入水印时,水印算法需要满足一定
目标跟踪是计算机视觉的重要研究课题之一,广泛应用于智能视频监控、自动驾驶、智能交通、航空航天、虚拟现实等领域。近些年,目标跟踪领域飞速发展,其中基于相关滤波的目标跟踪方法引人注目。目前,基于相关滤波的目标跟踪方法经过几年的研究与发展,已经进入瓶颈期,仅仅凭借相关滤波似乎已经无法取得更好的效果。本文以相关滤波目标判别模块为基础,结合基于卡尔曼滤波的位置修正模块和基于交并比网络的边界框优化模块,提出了
随着移动互联网的兴起和大量图像的涌现,如何提炼图像中的价值备受关注,而视觉注意机制的研究可以帮助研究人员解决这一问题。图像视觉注意力的研究对应静态和动态注意力两个层面分别建立有空域显著图预测模型和时域扫描路径预测模型,但现有空时注意力算法还未有关注人类对图像发生注意时的人类情感,而美学情感是一种与视觉注意力息息相关的情感。因此,本文提出了基于美感的空时视觉注意力预测算法,分别对显著图预测和扫描路径
乳腺癌是常见的恶性肿瘤之一,在女性群体中有逐年增长的趋势。乳腺病理学图像在显微镜下特定区域内的有丝分裂细胞个数是乳腺癌分级的重要指标。现阶段的有丝分裂计数主要靠人工进行,这一过程不仅耗时间,而且对操作人员有很高的的专业要求。因此基于计算机视觉技术实现有丝分裂自动检测具有重要意义。本文针对乳腺病理图像中有丝分裂检测问题开展研究,主要工作如下:针对传统有丝分裂检测识别方法直接对原始RGB图像处理,易于