基于双目视差和外极线约束的无监督深度预测

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:morgan1912
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度预测是计算机视觉领域最重要的研究课题之一,深度信息的预测是使计算机从二维的图像中抽取三维信息,对实现三维重建等实际问题有重要意义。近年来,有着强大的非线性函数的拟合能力以及图像特征提取能力的卷积神经网络在深度预测的研究中被广泛应用,并取得了不错的成绩。目前,基于卷积神经网络的深度预测的方法大多需要利用真实的深度图像作为标签对网络进行训练。但是,真实深度图像的采集需要昂贵精密的设备,成本非常高。针对此问题,本文围绕无监督深度预测问题进行研究,提出了基于双目视差和外极线约束的无监督深度预测方法,具体研究内容如下:本文提出了一种利用卷积神经网络的无监督深度预测方法。我们模拟人类用双眼采集场景信息的方式,采用双目相机采集的RGB图像作为输入,利用卷积神经网络拟合出一个复杂的非线性函数来计算输入图像的深度图像。结合预测出的深度信息,利用左右图像之间的视差,由右图像重建出左图像。利用真实的左图像与重建的左图像之间的像素差值,以及双目图像之间的外极线约束作为损失,对网络进行无监督的训练,实现对双目图像的无监督深度预测。此外,由于双目图像的视差不仅与深度值存在关系,还与左右相机的位置变换存在紧密联系,因此,本文还可以计算出左右相机之间的旋转和平移变换。本文使用的卷积神经网络借鉴了 Unet编码器解码器的网络结构,并在此基础上,对网络结构进行了改进,提出了一种改进的网络结构。为了能够模拟人类双眼采集信息的方式,本文的网络以双目图像作为输入,分别对左右图像进行卷积操作后将两部分进行通道合并,然后连接编码网络,我们以添加了注意力模块的残差网络作为编码器网络,对图像进行特征提取,最后,经过多次反卷积操作来恢复深度图像。通过与其他深度预测方法的实验效果进行对比,本文方法可以在无需真实深度图的情况下,预测场景深度信息的精度效果较好,并且本文的深度预测方法还可以计算出双目相机之间的平移和旋转变换。
其他文献
碳纤维是一种高弹模、高强度的材料,在混凝土中掺入碳纤维可以显著地提高混凝土的抗拉强度和阻裂增韧性能,近年来学者们对碳纤维混凝土已经进行了大量试验研究,但是在细观层次的研究还较少,而细观各材料组分的性质将直接影响碳纤维混凝土的破坏损伤过程,所以本文在细观层次对碳纤维混凝土的宏观力学性能和破坏损伤机理进行了数值模拟研究。研究内容如下:(1)分别通过Mori-Tanaka理论和有限元数值模拟进行了碳纤维
2018年5月,司法部颁布《司法部关于建立全国统一的司法行政戒毒工作基本模式的意见》文件(以下简称《意见》)要求全国建立统一戒毒模式,全国统一标准的戒毒模式由此形成。各省戒毒管理部门依据本省现行的戒毒管理模式,对照意见要求落实构建,并结合多年来对戒毒工作的探索和总结,进一步丰富戒毒理论、工作理念、方式方法,使得戒毒工作在统一规范下更加科学、有效。本文在建立全国统一戒毒模式背景下,以W市强制隔离戒毒
氧化锌材料在室温下具有宽的禁带宽度(约3.37 eV),高的激子束缚能(60 meV),能够实现高效率的紫外光发射,是理想的紫外发光材料,在紫外激光器、紫外探测器等方面具有重要的应用。
热障涂层材料被广泛地应用于高温燃气轮机和航空发动机的高温部件表面,为其内部的金属部件提供隔热防护作用,因此低热导率是这种涂层材料设计和实际使用的关键原因。大气等离
伴随着世界经济的快速发展,地球资源也在快速消耗。在国际关系中,资源的调配和短缺影响着国家间的协作和分歧。水资源短缺问题日益受到国际社会的关注,尤其淡水资源更是直接
改革开放以来,我国的金融市场蓬勃发展,其不仅实现了居民和国家财富的迅速扩张,还同时引起了金融风险的不断累积。在新时代的元年,习近平总书记在新时代的元年指出,金融市场在中国经济中已经占据主导地位,金融安全就是国家安全,中国金融安全已成为保持中国经济稳定发展的关键。为了了解中国未来的金融形势,识别潜在金融风险,便尤其需要构建中国系统性金融风险的预警指标体系,并在此基础上进行优化设计,对其准确性和适应性
随着互联网的普及,电子商务高速发展,越来越多的人开始网络购物,购物前阅读在线评论已经成为广大消费者的购物习惯。消费者在购买高嵌入度产品时由于不当的购买决策会带来较大的沉没成本,消费者更加依赖在线评论来辅助自己做出正确的决策。目前,在线评论从形式上可分为评分、文本型评论、图片型评论;从内容上可分为主观态度评论与客观事实评论。品牌作为一种大众对产品的认可,与在线评论共同影响消费者的购物决策。不同的品牌
含氮杂环化合物是杂环化合物的结构单元之一,广泛的存在于大自然界中,并且在各个领域都有着非常重要的用途。中氮茚类化合物作为一类含氮芳香杂环化合物,被广泛的发现于天然产物和合成有机化合物中。经过不断的研究发现,中氮茚衍生物不但具有良好的生物活性,被用作医药中间体,还广泛的应用于染料,高分子材料以及荧光探针等方面。自十九世纪首次合成以来,中氮茚及其衍生物的合成方法学研究一直备受关注。本论文是在无金属条件
背景:近年来脂肪因子成为心血管领域的研究热点。Metrnl作为一种全新的脂肪因子,前期研究发现其与冠心病(Coronary Artery Disease,CAD)发病率和严重程度显著相关。然而,截至目前其在急性心肌梗死(Acute Myocardial Infraction,AMI)中尚无研究报道。本研究旨在探索Metrnl与AMI患者临床主要不良预后之间的关系。方法:研究纳入181名AMI患者,
唐英以陶瓷大家的身份活跃于清代历史舞台,但他作为诗人在清代诗歌史上的面貌并没有被研究者充分地认识与发掘。唐英在九江任职期间,政事之余投身于文学创作,留下了许多诗文作品。同时他“寄情山水,四方往来唱酬无虚日”,广交当地文人名士,频频组织诗歌酬唱活动,这段时期正是唐英文学创作的高峰期和成熟期。通过对此阶段唐英组织的诗歌酬唱活动的分析,可以让我们对他的诗人角色有更加充分而全面的认知。本文于引言外,共三章