基于深度学习的光场图像深度提取技术研究

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:thd111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,鉴于成像技术的快速发展,光场相机不仅能够捕获光线的空间特性,还能够捕获光线的角度信息。正是由于这一特征,传统图像难以完成的三维建模、场景重构、景深的拓展等应用,在光场图像中有了较好的发展。然而,在光场图像深度提取中,传统方法存在提取精度低、计算速率慢的缺点。现有基于神经网络的算法仅仅利用水平或者竖直极面图像的几何特征而导致深度预测可靠度较低,且遮挡、噪声、弱纹理区域的存在严重影响深度提取的精度。本文针对在光场图像深度提取中所遇到的遮挡、弱纹理以及噪声影响深度提取精度的问题,设计了基于三维卷积核与U-型结构的光场图像深度提取网络架构。首先,针对现有的大部分神经网络仅仅利用水平或者竖直极面图像的几何特征而导致深度预测可靠度比较低的问题,本文设计了一种多分支输入网络架构。本文分别将光场图像的水平、垂直、以及两对角方向的视角图像进行堆叠放入网络中提取深度特征,使得深层次的网络能够充分提取这些不同极面图像的特征,从而提高了光场图像深度提取的可靠度。此外,针对场景遮挡问题,本文提出了在不同分支的视角图像堆叠中使用三维卷积核提取特征的方法,使得网络能够更好地学习极面图像对应点形成的直线斜率,以排除遮挡对深度提取精度的影响。实验表明,本文所设计的基于三维卷积核的多分支端到端光场深度提取全卷积网络能有效提高深度提取的可靠度,排除遮挡对深度提取的影响。其次,针对弱纹理以及相机噪声的存在影响深度提取精度的问题,本文设计了自编码与解码的U-型光场图像深度提取全卷积网络架构。本文在对各个支流的输入进行组合后,先进行扩大视野域的下采样过程,然后在上采样的过程中使用针孔连接来减少下采样精度的损失,使得网络能够将像素级别的特征与区域级的特征信息相结合,提高网络在弱纹理及噪声区域提取的精度。实验验证了本文所设计的基于U-型的光场图像深度提取全卷积网络在具有弱纹理和相机噪声的场景下提取物体纹理信息的可靠性。为验证模型的有效性和可靠性,本文使用了现有公开权威的数据集进行训练,并在不同的测试集上将评估的深度信息与现有世界领先的算法进行比较。实验表明,本文所提出的模型在遮挡、噪声、弱纹理、精细结构等多个不同的评价指标中均取得了优异的结果。
其他文献
对于中国读者而言,恩古吉·瓦·提安哥和德里克·沃尔科特这两个名字也许比较陌生,而实际上他们却在世界戏剧创作领域中占有重要的一席之地。前者为1973年亚非荷花奖的得主,
通过举借债务筹措资金是政府取得财政收入的重要途径,但同时也会带来一定的风险,有可能对经济的稳定与发展产生巨大影响。中国的政府性债务风险主要表现在地方级次,2010年末
节理是天然岩体中存在最为广泛的地质构造,节理的存在会把岩体分割成不连续、不均匀的各向异性地质体,进而对岩体的工程性质造成显著影响。同时,由于岩体中节理间往往含有一
随着人工智能的普及和飞速发展,神经网络在图像信号处理、语音信号识别、自动控制、交通运输等诸多技术领域的应用受到越来越多的重视和关注并发挥着重要的作用。为了实现人工智能应用,传统的冯·诺依曼计算机的数据处理能力和命令执行速度受到了巨大的挑战。从神经网络中得到灵感,并向不同于传统冯·诺依曼计算架构的智能架构演化。2008年惠普(HP)研究人员发现基于纳米级别的阻变式存储器(RRAM)中存在忆阻特性,宣
民办普通高中作为公办教育的教育机构补充,其学校数量的不断增长满足了社会各界对民办教育教学的整体需求。如何使学校在其数量不断增长的情况下提升其教学质量仍值得思考与探讨。民办普通高中作为基础教育向高等教育转型的学校类型,提高其办学质量的首要任务即是处理好教学工作,而要使教学工作得以有效运转必然需要良好的教学管理。经过阅览与整理有关资料,笔者发现对民办普通高中教学管理进行研究的国内外学者并不多。因此在本
河流和山脉常被认为是影响植物地理分布格局的重要因素,东北地区山脉河流众多,影响着该地区水生植物的种群遗传结构和遗传分化。本文以东北地区分布的两种黑三棱—线叶黑三棱
近年来,随着改革的不断深入和全面依法治国战略的推行,越来越多人意识到法治的重要性。但与此同时,各级人民法院尤其是基层法院的案件量与日俱增,法院公职人员的工作压力空前增加,产生了焦虑情绪和消极思想,极大影响了法院的工作效率和工作形象。如何运用激励措施提高法院公职人员的工作热情与积极性,越来越为各级人民法院管理者不得不考虑的现实问题。基层法院司法警察作为法院的特殊群体,是基层法院维护公平与公正的最前沿
学位
粒子输运理论和粒子输运方程在众多领域中都有非常广泛的应用,推动了大规模科学工程计算和国民经济建设的发展。Sweep3D采用离散纵坐标法(Sn),求解一个时间独立、三维笛卡尔
随着中国制造2025制造强国战略的稳步推进,中国制造业转型升级加速发展,电弧增材制造技术作为先进智能制造技术的一种,具有广阔的应用前景。在电弧增材制造过程中,同一点经过周期性的加热会产生复杂的热应力和残余应力演变,从而导致沉积层的层离,引起成形件的变形和开裂,降低成形件的性能和质量。本文基于热-弹塑性有限元法和必要的验证实验,对电弧增材制造合金钢的热历程和应力演变规律进行了研究,为控制成形过程中的
目的:探讨增加儿童肥胖风险的危险因子,分析母亲孕前超重或肥胖和儿童期饮食与儿童肥胖的关系,为生命早期预防和干预儿童肥胖提供流行病学证据。方法:基于前瞻性队列研究,纳