基于无监督学习的单目视觉里程计

来源 :浙江工商大学 | 被引量 : 0次 | 上传用户:taizi0204
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在大多数的计算机视觉应用中,精准地估计运动物体的运动姿态是其重要任务之一。位姿估计普遍应用于运动估计、VR(Virtual Reality)、无人驾驶等视觉任务。根据系统所采用的相机数量,可划分为单目或双目位姿估计,并扩展到单目或双目视觉里程计。随着近年来深度学习的快速发展,越来越多的研究人员将位姿估计问题和深度学习相结合,以获取更精确和鲁棒的估计结果。本文主要研究对象是基于深度学习的无监督单目视觉里程计,将深度估计和位姿估计任务联合训练。大多数的无监督单目视觉里程计研究中存在尺度歧义的问题,模型的结果在与真实数据(Ground Truth,GT)比较之前,需要先进行尺度恢复,恢复到世界的真实尺度。本文对该问题进行了研究和改进。另外,本文还优化了位姿估计网络的代价函数,提高了模型的精度。主要研究工作及创新如下:(1)本文首先详细介绍了传统几何视觉里程计方法,包括直接法和间接法。接着介绍了基于深度学习的视觉里程计方法,并且针对目前两个主流的无监督位姿估计方法开展讨论分析,分别是联合深度估计、位姿估计任务训练的SfMNet方法,以及联合深度估计、位姿估计、光流任务训练的GeoNet。接着介绍了本文实验所使用的数据集,及其相关的测评方式和指标。(2)由于单目视觉里程计仅依靠前、后图像帧来计算已知空间中某两点间的距离,不能够确定物体的绝对深度,因此最终获取的运动轨迹具有尺度不确定性。但是双目视觉里程计可根据同一帧内的左右立体图像对,恢复视觉里程计运动轨迹的绝对尺度。本文提出了一种基于深度神经网络的单目视觉里程计框架,在训练阶段,损失函数计算中引入双目立体图像数据以提供额外的双目基准约束,从而恢复了世界的真实尺度。在测试阶段,单目数据作为测试样本,预测相机的相对位姿变化。测评结果表明,所提模型已经恢复世界的真实尺度。(3)针对视觉里程计存在的累计误差问题,本文提出了一种新的位姿回环一致性损失,充分利用了训练样本中的空间信息,使得物体的运动轨迹与GT相接近,提高了模型的鲁棒性和相机的位姿估计的精度。鉴于欧拉角存在万向锁情况,本文还引入了效率较高的单位四元数。假设位姿估计网络的输入为连续三帧左图样本,鉴于传统几何视觉里程计中直接法的闭环检测,分别获得第一帧与第二帧、第二帧与第三帧、第一帧与第三帧的相机相对位姿估计,形成一个闭环,为模型提供了更强的约束。将本文的无监督VO算法与SfMLearner算法做比较,所提方法可明显降低模型的平移和旋转误差。
其他文献
超级电容器是一种新型储能器件,具有功率密度高、充放电速度快、使用寿命长等优点,受到人们的广泛关注。电极材料是新型超级电容器的关键组成部分,而碳材料是最受科研人员青睐的电极材料。在各种各样的碳材料中,树脂基炭材料是作为电极材料的优良选项。树脂材料——树脂基炭材料的前驱体——微观形貌可控,可据此设计树脂基炭材料的特殊形貌;树脂材料是杂原子的良好载体,碳化过程中即可完成掺杂,改善树脂基炭电极材料的电化学
随着日益改善的现代教学条件,一体化教学模式在很多职业院校的计算机课程中被广泛采用.本文主要探讨了在一体化教学模式背景下要解决的教学条件、教学安排、教学组织等方面问
【中图分类号】 G624【文献标识码】 A【文章编号】 2095-3089(2018)07-0-01  于漪曾说:在语文教学中,阅读最为基本。确实,阅读教学可以检测学生基础知识的掌握和运用,可以提高生学生的写作素养,正如叶圣陶所言:“阅读是写作的基础。”更重要的是,阅读教学可以培养学生良好的读书习惯,终身学习,终身有益。《语文课程标准》指出:“阅读是收集信息、认识世界、发展思维、获得审美体验的重要
【中图分类号】G612 【文献标识码】A 【文章编号】2095-3089(2018)13-0069-02  目前,由于经济的发展,“城市化”倾向逐渐加剧,幼儿拥有的各种名贵玩具越来越多,他们在野外探索的时间相对减少。笔者幼儿园遵循《3-6岁儿童学习与发展指南》和自然课程理念,充分挖掘自然课程资源,专门创设了近1000平米的的生态园,生态园里有供孩子观察实践的果园和蔬菜基地,方便幼儿亲近自然,自主学
【摘 要】 语文作文写作作为学生汲取知识,提高学生知识文化素养以及培养其文字运用能力的重要手段和基本途径,其不仅是语文教学中一项十分重要的内容,还是培养学生文字运用能力的关键。但就目前而言,我国小学语文教师的写作教学和小学生的写作水平却成为了一个棘手的问题。鉴于此,笔者则根据‘小学语文写作教学思维和方法的转变’这一课题,并结合笔者自身多年的教学经验来谈一谈自己的教学尝试与看法,以期对自己及他人的语
【摘 要】随着课改的热潮涌进校园,让我更加相信学生的全面素质完全可以得到进一步的提高。但教师必须转变自己的观念,明确自己的目标。《数学课程标准》中明确指出: “ 学生是学习的主人,教师是数学教学活动的组织者的发展、引导者和合作者 ” 教师角色的转变,使学生真正成为学习的主人,体现了数学课程改革的基本理念。现在素质教育的进一步深化,现代教育最重要的特征就是越来越能体现人的主体性,追求个人的全面发展,
摘要:计算机网络基础实验一直是计算机专业类、通信类学生的必修课,旨在让学生掌握计算机网络通信的基本理论和实际操作知识,具有很强的现实操作意义。笔者结合几年来的计算机网络维护与实验经验,就计算机网络实验特点、实验教学方法以及实验操作实施过程谈谈自己的体会,以期同行交流。  关键词:计算机网络;基础实验;教学  中图分类号:TP393文献标识码:A文章编号:1007-9599 (2010) 10-00